Чтение двоичных данных из stdin

Question

Можно ли читать stdin как двоичные данные в Python 2.6? Если да, то как?

Я вижу в Python 3.1 documentation, что это довольно просто, но возможности для этого в 2.6, похоже, не существуют.

Если методы, описанные в 3.1, недоступны, существует ли способ закрыть stdin и повторно открыть в двоичном режиме?

Update

Просто чтобы быть ясно, я использую «тип» в оболочке MS-DOS к трубе содержимое двоичного файла на мой питона код. Насколько я понимаю, это должно быть эквивалентом команды «cat» Unix. Но когда я проверяю это, я всегда получаю на один байт меньше ожидаемого размера файла.

Update # 2

Во-первых, спасибо за все ответы. Я медленно работаю над настоящим, полезным решением. В конце концов, я все еще пытаюсь создать автономный JAR-файл, который выполняет мой код Python, автоматически проходящий через все аргументы командной строки, не испорченные.

Причина, по которой я иду по маршруту Java/JAR/Jython, состоит в том, что одна из моих основных внешних библиотек доступна только как Java JAR. Но, к сожалению, я начал свою работу как Python. Возможно, было проще конвертировать мой код в Java некоторое время назад, но поскольку этот материал был все совместим, я решил, что попробую проехать через него и доказать, что это можно сделать.

В случае, если кто-то задавался вопросом, это также связано с вопросом, который я задал несколько дней назад.

Packaging and deploying a Jython program from Eclipse

Некоторые из этого вопроса был дан в этом question.

Поэтому я попытаюсь обновить свой первоначальный вопрос с некоторыми заметками о том, что я выяснил до сих пор.

Answer 1

Используйте команду -u command line switch, чтобы заставить Python 2 обрабатывать stdin, stdout и stderr как двоичные небуферизованные потоки.

C:> type mydoc.txt | python.exe -u myscript.py 

Answer 2

import sys 

data = sys.stdin.read(10) # Read 10 bytes from stdin 

Если вам нужно интерпретировать двоичные данные, используйте модуль struct.

Answer 3

Если вам все еще нужно это ... Этот простой тест я использовал для чтения двоичный файл, содержащий 0x1A символ в

между

import os, sys, msvcrt 

msvcrt.setmode (sys.stdin.fileno(), os.O_BINARY) 
s = sys.stdin.read() 
print len (s) 

Мои данные проверочный файл был:

0x23, 0x1A, 0x45 

Без установки режима stdin в двоичный режим этот тест печатает 1, как только он обрабатывает 0x1A как EOF. Конечно, он работает только с окнами, потому что зависит от модуля msvcrt.

Answer 4

Из документов (см here):

The standard streams are in text mode by default. To write or read binary data to these, use the underlying binary buffer. For example, to write bytes to stdout, use sys.stdout.buffer.write(b'abc') .

Но, как и в принятом ответе, ссылаясь на питона с -u еще один вариант, который заставляет STDIN, STDOUT и STDERR быть полностью небуферизован. Подробнее см. Справочную страницу python (1).

Дополнительную информацию о буферизации текста можно найти на странице documentation on io и использовать sys.stdin.detach(), чтобы отключить буферизацию из Python.

Answer 5

Вот окончательный вариант для Linux/Windows Python 2/3 совместимого кода для чтения данных из стандартного ввода без коррупции:

import sys 

PY3K = sys.version_info >= (3, 0) 

if PY3K: 
    source = sys.stdin.buffer 
else: 
    # Python 2 on Windows opens sys.stdin in text mode, and 
    # binary data that read from it becomes corrupted on \r\n 
    if sys.platform == "win32": 
     # set sys.stdin to binary mode 
     import os, msvcrt 
     msvcrt.setmode(sys.stdin.fileno(), os.O_BINARY) 
    source = sys.stdin 

b = source.read()