Я хотел бы прочитать файл из HDFS с использованием метода Python open()
. Однако он не работает. Может ли кто-нибудь дать мне метод чтения файла hdfs с использованием метода Open() в python.Как читать файл, хранящийся в hdfs, используя метод python Open()?
for line in open("hdfs://namenode:54311/user/hadoop/filename.txt"):
Однако это дает мне ошибку
"IOError: [Errno 2] No such file or directory: 'hdfs://namenode:54311/user/hadoop/filename.txt'"
Возможный дубликат [Python читать файл как поток из HDFS] (http://stackoverflow.com/questions/12485718/python-read-file-as-stream-from-hdfs) – rchang