Как перенаправить асинхронный вывод в файл?

Question

У меня есть сценарий Node.js, который считывает содержимое файла, делает некоторые преобразования на его содержание, а также регистрирует выход:

var transformer = require('./transformer'), 
    fs = require('fs'), 
    file = process.argv[2]; 

if (!file) { 
    throw 'no file specified\n'; 
} 

fs.readFile(file, 'utf-8', function (err, data) { 
    if (err) { 
     throw err; 
    } 

    transformer.transform(data, function (text) { 
     console.log(text); 
    }); 
}); 

Это прекрасно работает:

$ node transform.js myfile.txt 

и это работает :

$ node transform.js myfile.txt > anotherfile.txt 

Но, когда я пытаюсь перенаправить вывод в тот же файл, что я читал из, файл становится пустым:

$ node transform.js myfile.txt > myfile.txt 

То же самое с помощью tee:

$ node transform.js myfile.txt | tee myfile.txt 

Любопытно, что это работает:

$ node transform.js myfile.txt >> myfile.txt 

Но я не хочу, чтобы добавить в файл - Я хочу, чтобы переписать его содержимое.

Я думаю, что проблема в том, что fs.readFile является асинхронным, а также асинхронно console.log - т. Е. Он получает куски данных, а не все данные одновременно. Я думаю, что я могу использовать fs.readFileSync, но каков правильный способ справиться с этим?

Answer 1

Проблема не на самом деле в узле, а в оболочке. Когда вы перенаправляете >, первое, что делает оболочка, - это открыть файл для записи, опорожнения файла. Ваша программа переходит к чтению из этого пустого файла, и в вашем случае пустой ввод означает пустой вывод.

Это тоже приведет к пустой файл независимо от исходного содержимого myfile.txt:

$ cat myfile.txt > myfile.txt 

Одно решение было бы записать файл в сценарии узла, а не с помощью перенаправления. Вы уже указываете и читаете файл там, поэтому почему бы не указать выходной файл в argv и написать ему, а не использовать перенаправление оболочки? Просто позаботьтесь о структурировании своего кода, чтобы работа над чтением и записью в один и тот же файл.

Как примечание @slebetman в комментарии, другое решение - cat myfile.txt > tmp; mv tmp myfile.txt (или мое предпочтение: cat myfile.txt > tmp && mv tmp myfile.txt).

Answer 2

Проблема заключается в том

• вы открываете файл для чтения,
• затем открыть файл для записи (опорожнения),
• затем чтение из пустого файла.
• преобразования ничего
• ничего не писать

То, что я думаю, что вы хотите вместо этого заключается в следующем:

• открыт для чтения
• чтения и буфера
• преобразование
• открыт для записи
• написать письмо

Там в несколько способов сделать это:

1) Прочитайте файл синхронно. Node.js 0.12 supports this.

var transformer = require('./transformer'), 
    fs = require('fs'), 
    file = process.argv[2]; 

if (!file) { 
    throw 'no file specified\n'; 
} 

fs.readFileSync(file, 'utf-8', function (err, data) { 
    if (err) { 
     throw err; 
    } 

    transformer.transform(data, function (text) { 
     console.log(text); 
    }); 
}); 

2) Используйте "потоки"

Это действительно лучший способ. Особенно, если вы хотите узнать Node.js

Лучший способ узнать о потоках из NodeSchool: http://nodeschool.io/#workshoppers Попробуйте stream-adventure.

К концу вы получите таких проблем.

Удачи вам!