Я успешно создал кластер hadoop с CDH4 на ubuntu. Я создал это с одним мастером (ведущим) и одним подчиненным (slave1). Теперь я хочу добавить еще один кластер. Для этого я просто клонировал slave2 и обновил хосты и ssh соответственно. Затем я обновляю файл conf/slaves со всеми именами datanode dns во всех узлах и перезапускаю все. Но он не обнаруживает новый datanode, вместо этого он показывает только старый, который является slave1, а не slave2. Может ли кто-нибудь помочь мне в этом? Я использовал cdh4-repository_1.0_all.debCDH4: Добавить новый узел в существующий кластер
ответ
@ user2009755, вам нужно создать основной и подчиненный файл только в главном. И в файлах конфигурации в $ HADOOP_HOME/etc/hadoop внесите необходимые изменения в URI, указывающие на главный узел.
ПРИМЕЧАНИЕ. Попробуйте форматировать namenode и удалить файлы tmp (обычно/tmp/*), но если вы изменили его на core-site.xml
, отформатируйте этот каталог во всех узлах и запустите все демоны, это сработало для меня.
Существует очень много причин,
Вы измените значение dfs.replication до 3 в конф/HDFS-site.xml ??
проверка на мастер с cammands hduser @ мастер: ~ $ SSH ведомое он должен быть показать подчиненный терминал, если нет, то выполнить эту cammand - hduser @ мастер: ~ $ SSH-копия-ID -i $ HOME/.ssh/id_rsa.pub hduser @ раб
для полного понимания этой ссылки
http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-multi-node-cluster/
- 1. не может добавить новый узел в существующий кластер galera
- 2. Как добавить новый узел в кластер cassandra
- 3. Как добавить новый узел в существующий XML
- 4. Как добавить узел kubernetes в существующий кластер на aws
- 5. Как добавить новый узел в существующий узел в XML
- 6. Postgres XL добавить узел данных в существующий кластер
- 7. добавить узел в существующий аэрокосмический кластер, используя автомасштабирование
- 8. Добавить новый узел в существующий кластер данных datastax в облаке Google
- 9. Добавление узла в существующий кластер в Kubernetes
- 10. Kubernetes ubuntu голый металл, чтобы добавить новый узел в кластер
- 11. Как добавить узел в кластер mnesia?
- 12. добавить новый узел в существующий связанный список в c
- 13. Вставьте новый дочерний узел в существующий XML
- 14. Добавить новый узел в уже существующий XML-документ
- 15. Добавление нового узла в существующий кластер
- 16. Как вставить новый узел в существующий XML
- 17. Кассандра: когда добавить новый узел
- 18. Как добавить узел в работающий кластер neo4j?
- 19. JSON добавить узел в существующий JObject
- 20. MongoDB Добавить обломок в существующий кластер - Что происходит?
- 21. Добавить новый узел в существующий узел в JavaTree с помощью Java
- 22. Не удается добавить узел в существующий кластер cassandra datastax на EC2 AMI
- 23. Узел: добавить выходной файл в существующий файл
- 24. Добавить узел в существующий документ XML
- 25. Как добавить хосты в CDH4
- 26. XSLT - добавить новый узел, анализируя текстовый узел
- 27. XSLT - добавить новый текстовый узел анализирующая() узел
- 28. Как добавить новый узел в xml-файл
- 29. Как добавить узел как дочерний элемент в существующий узел XElement?
- 30. преобразование XSLT добавить новый узел
Я сделал его работу, наконец, .и отформатированный NameNode и воссозданы узел данных каталогов для хранения и перезагрузки все, и это сработало. Но в производстве я не могу отформатировать NN. – Deb
@ user2009755, какая ошибка при попытке форматирования namenode? пожалуйста, опубликуйте его. – kishorer747
форматирование всегда работает для меня ... моя проблема заключалась только в том, чтобы добавить новый узел, который был окончательно решен .. – Deb