2013-10-27 3 views
2

У меня есть CDH4.3 все-в-одном vm и работаю, я пытаюсь установить клиент hadoop удаленно. Я заметил, что, не меняя никаких настроек по умолчанию, мой кластер hadoop прослушивает 127.0.0.1:8020.fs.defaultFS только слушает порт localhost 8020

[[email protected] ~]$ netstat -lent | grep 8020 
tcp  0  0 127.0.0.1:8020    0.0.0.0:*     LISTEN  492  100202 

[[email protected] ~]$ telnet ${all-in-one vm external IP} 8020 
Trying ${all-in-one vm external IP}... 
telnet: connect to address ${all-in-one vm external IP} Connection refused 
[[email protected] ~]$ telnet 127.0.0.1 8020 
Trying 127.0.0.1... 
Connected to 127.0.0.1. 
Escape character is '^]' 

моего удаленный компьютер имеет все конфигурации (core-site.xml, hdfs-site.xml), указывающие на ${all-in-one vm external IP}. Когда я бегу что-то из удаленного клиента, и я получаю это:

└ $ ./bin/hdfs --config /home/${myself}/hadoop-2.0.0-cdh4.3.0/etc/hadoop dfs -ls 
13/10/27 05:27:53 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 
ls: Call From ubuntu/127.0.1.1 to ${all-in-one vm external IP}:8020 failed on connection exception: java.net.ConnectException: Connection refused; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused 

Я изменил свое Hadoop все-в-одном Виджей Малья: core-site.xml and hdfs-site.xml под /etc/hadoop/conf из: localhost.localdomain ->${all-in-one vm external IP},, но после перезагрузки HDFS, он по-прежнему слушает localhost 8020. Есть идеи? Как я могу заставить его слушать $ {внешний IP} на 8020 вместо localhost.

+0

hmmm ... это кажется старым, но я вижу ту же проблему, используя hadoop 2.7.3. Изменение порта core-site.xml ничего не делает, и если значение ничего, кроме 8020, приводит к отказу соединений от 'hdfs: // myserver /'. – monkut

ответ

1

Вы должны иметь возможность напрямую настраивать свойство dfs.namenode.rpc-address как 0.0.0.0:8020, чтобы клиент службы IPC-клиента NameNode прослушивал все интерфейсы или настраивал его на ваш конкретный IP-адрес, только чтобы прослушать его.

Сообщалось, что смена состояния штата должна была сработать, но поскольку вопрос не имеет ваших точных конфигураций и журналов, я не могу сказать почему.

Смежные вопросы