задержки чтения с кодеками стандартного ввода

Question

Я пытаюсь просто читать из стандартного ввода, используя кодеки, используя код ниже

import codecs 

ins = codecs.getreader('utf-8')(sys.stdin, 'replace') 
for l in ins: 
    print l 

У меня есть еще один сценарий, который записывает на стандартный вывод в порыве небольших данных. Мне нужен мой скрипт для обработки данных после каждого всплеска. Тем не менее, кодеки, похоже, заполняют данные. Это означает, что строки, записанные в stdout, не отображаются сразу в моем коде выше. Есть ли параметр, который я могу настроить для предотвращения буферизации?

Спасибо!

Answer 1

В этом, казалось бы, простом примере есть два уровня буферизации. Чтобы избежать первого уровня --- и более как обходное решение, чем решение --- вы можете читать каждую строку, а затем декодировать ее, а не наоборот. Он работает, потому что окончание строки все равно однозначно \ n в utf-8. (Примечание: это первая часть кода не работает, потому что он все еще имеет 2-й уровень буферизации Он входит в иллюстративных целях)

for l in sys.stdin: 
    l = l.decode('utf-8', 'replace') 
    print l 

Второй уровень происходит от for l in file. Поэтому вам действительно нужно:

while True: 
    l = sys.stdin.readline() 
    if not l: break 
    l = l.decode('utf-8', 'replace') 
    print l