SerializeObject throws System.OutOfMemoryException

Question

У меня есть серьезная проблема с «JsonConvert.SerializeObject». Мне нужно сериализовать более 500 000 записей словаря, чтобы сделать сериализацию, выдает следующую ошибку; System.OutOfMemoryException. Я попытался сериализовать каждую пару, пару значений отдельно в foreach, но она заблокирована. По-видимому, это проблема оптимизации, но я не знаю с чего начать, потоки сериализуются по частям? Эти функции отлично работают с несколькими значениями. Мой код:

string json = JsonConvert.SerializeObject(DatatableToDictionary(dt), Newtonsoft.Json.Formatting.Indented); 

public List<Dictionary<string, object>> DatatableToDictionary(DataTable dt, List<DataColumn> columns) 
{ 
    return dt.Rows.Cast<DataRow>().Select(
     r => columns.ToDictionary(c => c.ColumnName, c => r[c.ColumnName])).ToList(); 
} 

Answer 1

Когда вы имеете дело с большим количеством данных, вы можете передавать его в файл, чтобы избежать все это в памяти сразу.

var filePath = @"C:\somewhere.json"; 

using (var fs = File.Open(filePath, FileMode.CreateNew)) 
using (var sw = new StreamWriter(fs)) 
using (var jw = new JsonTextWriter(sw)) 
{ 
    var serializer = new JsonSerializer(); 
    serializer.Serialize(jw, dictionary); 
} 

Это будет сериализовать бит за раз и избежать наличия гигантской строки в памяти.