Ошибка памяти из вложенного цикла C#

Question

Я посмотрел на это, и я почти понял его, но у меня есть эта оставшаяся ошибка времени выполнения.
Мой код выглядит следующим образом:

while ((line = reader.ReadLine()) != null) 
{ 
    while (reader.Peek() != '\r') 
    { 
     datalinestream.Add(GetWord(reader)); 
    } 
    LuceneDB.AddUpdateLuceneIndex(new MATS_Doc(datalinestream)); 
    datalinestream.Clear(); 
} 

Код импорта данных, но цикл не будет ломаться и приведет к краху из-за следующей

«Необработанное исключение типа«системы. OutOfMemoryException»произошел в mscorlib.dll»

Что такое соответствующие условия перерыва для внешнего времени цикла, чтобы гарантировать, что я прочитал весь файл и разорвать в конце. Я борюсь с этим, так как мне нужно перейти к следующей строке, и мне нужно пропустить первую строку в электронной таблице. Любая помощь очень ценится.

* UPDATE *

очистить список строк, так как я создаю документ для индекса Lucene, и он имеет только около 14 полей в нем, и я не хочу список, чтобы получить слишком большой.

Мой код GetWord

private string GetWord(TextReader inputdata) 
     { 
      String word = ""; 

      while (inputdata.Peek() >= 0) 
      { 
       word += (char)inputdata.Read(); 
       if ((word.Contains(";"))) break; 
      } 

     return word; 
    } 

Answer 1

Я предполагаю, GetWord не продвигается читателя - вызвавшего datalinestream получить массовый характер.

Или ваш файл действительно массивный.

Из интереса - почему вы выбрасываете line? - уверен, что содержит весь текст, который вы пытаетесь прочитать во внутреннем цикле?

Update

Там должны четко быть логическое отверстие где-то в вашем коде, и я думаю, это либо добавление -1 или 0 символов в списке, или внутренней строки в GetWord (кстати, с использованием += на строках таким образом ужасен для производительности и использования памяти). Также может быть, что ваши терминаторы линии не \r, а просто «голые» \n.

Что сказал, вы могли бы решить все ваши проблемы, делая это так:

string line = reader.ReadLine(); 
string wordTemp; 
while(line != null) 
{ 
    string[] words = 
    line.Split(";".ToCharArray(), StringSplitOptions.RemoveEmptyEntries); 
    foreach(var word in words) 
    { 
    wordTemp = word.Trim(); //get rid of any whitespace 
    if(wordTemp.Length != 0) 
     datalinestream.Add(wordTemp); 
    } 
    LuceneDB.AddUpdateLuceneIndex(new MATS_Doc(datalinestream)); 
    datalinestream.Clear(); 
    line = reader.ReadLine(); 
} 

Как я говорю - не выбрасывайте эту линию вы только что прочитали - использовать его, используя тот факт, что она лишает новые линии тоже. Затем просто используйте string.Split, чтобы взломать каждое из слов, обрезая их в процессе, чтобы избавиться от любых конечных/ведущих пробелов, которые у них могут быть.

Answer 2

это может вызвать исключение

 while (reader.Peek() != '\r') 
     { 
     datalinestream.Add(GetWord(reader)); 
     }