在我的应用程序中,我有很多保存在特定路径结构中的小文件。我正在创建一个容器文件,我想在其中存储所有现有文件,该文件以包含每个文件的偏移量或文件大小等信息的标题开头。我正在使用 BinaryWriter 写入此文件。但是有很多重复项只添加到我的容器文件中一次。因此,我为每个文件创建一个哈希值,并将其与数据表中的现有哈希值进行比较。这就像它应该的那样工作,但我想知道这是否是好的做法,因为可能存在大量数据。是否有更好或更高效的方法来实现我的目标?
这是我的实际代码:
// I parsed through my files and created my header
// all file paths were added to my tileList
DataTable dtImageInfos = new DataTable();
dtImageInfos.Columns.Add("tilename", typeof(String));
dtImageInfos.Columns.Add("hash", typeof(String));
dtImageInfos.Columns.Add("offset", typeof(long));
foreach (String tile in tileList)
{
FileInfo f = new FileInfo(tile);
int tileSize = Convert.ToInt32(f.Length);
if (tileSize <= MAX_CHECK_SIZE)
{
Image tileImg = Image.FromFile(tile);
String tileHash = createHashForImage(tileImg);
DataTable dtCheck = dtImageInfos.Clone();
if (dtImageInfos.Rows.Count > 0)
dtImageInfos.AsEnumerable().Where(t => t.Field<String>("hash").Equals(tileHash))
.CopyToDataTable(dtCheck, LoadOption.OverwriteChanges);c#
if (dtCheck.Rows.Count == 0)
{
writer.Write(tileOffset);
DataRow drNew = dtImageInfos.NewRow();
drNew["tilename"] = tile;
drNew["hash"] = tileHash;
drNew["offset"] = tileOffset;
dtImageInfos.Rows.Add(drNew);
tileOffset += tileSize;
}
else
{
DataRow drCheck = dtCheck.Rows[0];
writer.Write((long)drCheck["offset"]);
}
}
else
{
writer.Write(tileOffset);
DataRow drNew = dtImageInfos.NewRow();
drNew["tilename"] = tile;
drNew["hash"] = "";
drNew["offset"] = tileOffset;
dtImageInfos.Rows.Add(drNew);
tileOffset += tileSize;
}
writer.Write(tileSize);
}
foreach (DataRow drTile in dtImageInfos.Rows)
{
byte[] tileData = File.ReadAllBytes(drTile["tilename"].ToString());
writer.Write(tileData);
}
我希望我能让我的问题可以理解。提前致谢