Замена нескольких строковых значений в файлах

Question

Я пытаюсь очистить некоторые файлы, которые я получаю ежеквартально. У них есть куча повторяющихся заголовков, и я хотел бы заменить несколько значений строк за один раз. Я могу удалить одну строку за раз, но я не понимаю, как я могу передать файл и посмотреть на каждую строку и удалить, если это строка 1 или строка 2.

Каждый файл имеет не менее 100-300 тысяч строк и я получаю от 10 до 50 файлов каждый раз, когда данные сбрасываются мне примерно раз в квартал ... Было бы проще, если бы они не добавляли эти строки, но это не вариант.

Извините за вопрос новичков, но я не получаю код очень часто. Любая помощь приветствуется ...

static void Main(string[] args) 
{ 
    string tempFile = Path.GetTempFileName(); 
    string t1 = "-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------"; 

    string fName = "C:\\PoC\\test\\test.txt"; 
    using (var sr = new StreamReader(fName)) 
    using (var sw = new StreamWriter(tempFile)) 
    { 
     string line; 

     while ((line = sr.ReadLine()) != null) 
     { 

      if (line.Contains(t1) == false) 
      { 
       sw.WriteLine(line); 
      } 
     } 
     sr.Close(); 
     sw.Close(); 
    } 

    File.Delete(fName); 
    File.Move(tempFile, fName); 
} 

Answer 1

Вызов string.Contains() почти так же дорого, как вызов string.replace(), потому что в любом случае вся строка должна быть отсканированы для подстроки. В случае Replace() найти совпадение создает и возвращает новую строку, представляющую результат замены, в противном случае возвращает исходную строку. Изменение

if (line.Contains(t1) == false) 
    sw.WriteLine(line); 

в

sw.WriteLine(line.Replace(t1, whatYouWantToReplaceWith)); 

При замене нескольких значений в одной строке, вы можете написать

sw.WriteLine(
    line 
    .Replace(t1, whatYouWantToReplaceWith1) 
    .Replace(t2, whatYouWantToReplaceWith2) 
    .Replace(t3, whatYouWantToReplaceWith3) 
); 

Обратите внимание, что использование нескольких .Привернуть() вызовет линию сканироваться для совпадений несколько раз. Хотя это немного снижает производительность, большая часть вашего времени обработки, вероятно, все еще будет файлом IO.

Если вы знаете, что замена будет когда-либо происходить, например. в первой строке вы можете добавить счетчик для отслеживания номера строки, на которой вы находитесь, и применять код Replace() только к соответствующим строкам.

Обратите внимание, что вы могли бы получить дополнительные улучшения в большом файле на using a BufferedStream.

UPDATE

Основываясь на утверждении, что вы просто хотите удалить строку, я предлагаю вам идти с ответом @ Eşer в.

Answer 2

Я хотел бы заменить несколько значений строк за один раз.

Использование Linq может сделать ваш код проще

string[] stringsToRemove = new[] { "str1", "str2", "str2" }; 

var query = File.ReadLines(fName) 
       .Where(line => !stringsToRemove.Any(s => line.Contains(s))); 

File.WriteAllLines(tempFile, query); 

Answer 3

Я знаю, что вы работаете на C# программы, если цель состоит в том, чтобы просто удалить строки, которая соответствует скороговоркой, то я хотел бы использовать что-то вроде Редактор Unix Stream sed, см. sed for Windows stand alone command, или cygwin, и вы можете просто использовать эту команду, чтобы удалить все строки, соответствующие шаблону и строкам, следующим за ним, вы можете написать сценарий .bat для копирования, переименования и удаления строк, чем один образец. Это очень быстро.

sed -i '/^---------/d' filepath