Hadoop узел высокая доступность

Question

Как иметь высокую доступность namenode? Должны ли мы настроить что-то в кластере. (Предполагается ли мы иметь 2 узлов (namenodes)

Answer 1

Там много ресурсов в Интернете о том, как сделать это в Hadoop v1, например http://www.hadoopsphere.com/2012/11/understanding-high-availability-options.html или http://hortonworks.com/blog/ha-namenode-for-hdfs-with-hadoop-1-0-part-1/

В Hadoop . 2,0 это по своей сути решается

Answer 2

DataNode: Они делают реальную работу ..

NameNode: Есть ли работа управления DataNode,

CLUS. ter может иметь много DataNodes, но только один NameNode. В кластере физических ящиков, как правило, один ящик запускает NameNode, а в других ящиках запускаются DataNodes.

Это хорошая идея, чтобы сохранить NameNode отдельно от DataNodes, которые выполняют работу с ворчанием. Причина в том, что работа NameNode уже интенсивно связана с памятью. То, что NameNode может быть одной точкой отказа для вашего кластера, тоже не помогает. Следовательно, часто повторяющийся совет, чтобы поддерживать NameNode на отдельном высокодоступном сервере с надежной надежностью.