Самый эффективный способ сравнения memystream с файлом C# .NET

Question

У меня есть MemoryStream, содержащий байты изображения с PNG-кодированием, и вы хотите проверить, есть ли точный дубликат этих данных изображения в каталоге на диске. Первым очевидным шагом является поиск файлов, соответствующих точной длине, но после этого я хотел бы узнать, что является наиболее эффективным способом сравнения памяти с файлами. Я не очень опытен, работая с потоками.

У меня было пару мыслей по этому вопросу:

во-первых, если я мог бы получить хэш-код для файла, он будет (предположительно) будет более эффективным для сравнения хэш-кодов, а не каждый байт изображения. Аналогично, я мог бы сравнить только некоторые байты изображения, давая ответ «достаточно близко».

А потом, конечно, я мог бы просто сравнить весь поток, но я не знаю, как бы быстро это было.

Каков наилучший способ сравнить MemoryStream с файлом? Байт по-байту в цикле?

Answer 1

Во-первых, получение хэш-кода двух потоков не поможет - для расчета хэш-кодов вам нужно будет прочитать все содержимое и выполнить простые вычисления при чтении. Если вы сравниваете файлы по байтам или с помощью буферов, вы можете остановить ранее (после того, как вы найдете первые два байта/блока), которые не совпадают.

Однако этот подход имел бы смысл, если бы вам нужно было сравнить MemoryStream с несколькими файлами, потому что тогда вам нужно будет пропустить через MemoryStream только один раз (для вычисления хэш-кода) и пропустить все файлы.

В любом случае вам необходимо написать код, чтобы прочитать весь файл. Как вы уже упоминали, это можно сделать побайтовым или с использованием буферов. Чтение данных в буфер - хорошая идея, потому что это может быть более эффективная работа при чтении с жесткого диска (например, чтение буфера 1 кБ). Более того, вы можете использовать асинхронный метод BeginRead, если вам нужно обрабатывать несколько файлов параллельно.

Резюме:

• Если вам нужно сравнить несколько файлов, используйте Hashcode
• Для чтения/сравнения содержимого одного файла:
  • Читать 1kB данных в буфер из обоих потоки
  • Посмотрите, есть ли разница (если да, прекратите)
  • Продолжить цикл

Выполнить вышеуказанные действия асинхронно с помощью BeginRead, если вам нужно обработать mutliple файлы параллельно.

Answer 2

Другое решение:

private static bool CompareMemoryStreams(MemoryStream ms1, MemoryStream ms2) 
{ 
    if (ms1.Length != ms2.Length) 
     return false; 
    ms1.Position = 0; 
    ms2.Position = 0; 

    var msArray1 = ms1.ToArray(); 
    var msArray2 = ms2.ToArray(); 

    return msArray1.SequenceEqual(msArray2); 
} 

Answer 3

Использование Stream мы не получим результат, каждый файлов имеет уникальный идентификатор, например, дату последнего изменения и так далее. Таким образом, каждый файл отличается. Эта информация включена в поток