Я начинаю устанавливать hadoop на кластере. У меня есть ssh доступ к этим машинам, и я уже установил на них ткань. Мне было интересно, если кто-то уже написал fabfile для установки и развертывания hadoop в кластере. Я нашел этот проект [0]; но это написано для развертывания над экземплярами AWS. Я искал что-то, где я могу просто заполнить IP-адреса своих машин, а затем выполнить набор команд fab, чтобы вызвать кластер.Тканевые скрипты для установки Hadoop на кластере машин?
1
A
ответ
2
Я AlexJF, автор сценариев вы связаны между собой.
Сценарии, на которые вы ссылаетесь, также могут использоваться вне EC2. Вам просто нужно настроить, по вашему запросу, список хостов и конфигураций в верхней части fabfile.py. Обязательно установите EC2 = False
(что, по-видимому, является значением по умолчанию).
У вас будет several useful commands.
+0
Спасибо, Алекс! – Apurv
Смежные вопросы
- 1. Процедура установки Mysql в кластере hadoop
- 2. Как получить дату установки Windows виртуальных машин в кластере?
- 3. Запуск mapreduce java-программ на кластере hadoop
- 4. Запуск Hadoop тесты на удаленном кластере Hadoop
- 5. Запуск Спарк на кластере машин суперкомпьютер
- 6. R установка на кластере Hadoop
- 7. Установка RHadoop на кластере Hadoop
- 8. Как использовать графит collectd на кластере hadoop
- 9. Оптимизируйте работу ореха на кластере hadoop
- 10. Как разделить данные на кластере в Hadoop
- 11. Как WaitForUpdates от виртуальных машин в кластере?
- 12. hadoop - Уменьшение карты на нескольких кластере
- 13. java.lang.NoClassDefFoundError: работает пример Mahout на кластере hadoop
- 14. Проверка подлинности Kerberos на кластере Hadoop
- 15. рекомендация Оборудования для зоопарка в Hadoop кластере
- 16. Как запустить Hadoop на кластере Mesos?
- 17. Mapper with multipleInput на кластере Hadoop
- 18. Запуск приложения на конкретном узле в кластере Hadoop
- 19. Хранение данных в кластере Hadoop
- 20. Тканевые скрипты для автоматического развертывания веб-приложений больше не работают на Jelastic версии 4.9
- 21. Развертывание артефактов в кластере Hadoop
- 22. Установка Cassandra в кластере Hadoop
- 23. Устойчивость Java и string.hashCode() для всех машин в кластере
- 24. Hadoop в кластере Maui + Torque
- 25. Репликация данных в кластере hadoop
- 26. mrjob virtualenv errore в кластере Hadoop
- 27. Скрипты установки Windows 10
- 28. Развертывание Apache Spark на кластере пряжи Hadoop с возможностью HA
- 29. Hadoop: Недостатки использования только двух машин?
- 30. Форматирование namenode для установки Hadoop
просто интересно, что было бы целью установки hadoop на экземпляры ec2? сервис AWS EMR предоставляет это встроенное, всего несколько кликов и сделано :) или, возможно, этот сценарий фактически родился до EMR – Tom