Impala на Hadoop 2.2.0 без CDH?

Question

Я хочу проверить и настроить Impala с моим дистрибутивом Hadoop 2.2.0, а не Cloudera.

Я хочу знать, можно ли использовать Impala без CDH, потому что я только читаю, что Impala зависит от CDH.

Я стараюсь следовать инструкциям в Impala Github - https://github.com/cloudera/impala - и я сделаю возможные изменения, чтобы заставить его работать.

Кто-нибудь уже сделал это? или это действительно невозможно?

Answer 1

Я думаю, что есть две вещи, которые здесь должны быть рассмотрены отдельно:

1. Запуск Impala на не-CDH Hadoop. Это возможно, хотя он не протестирован или не поддерживается Cloudera. Однако другие распределения Hadoop включают Impala, например. MapR's distribution includes Cloudera Impala и Amazon announced support for Impala on Elastic MapReduce, и они оба протестировали, что он работает с их распределением. Я предполагаю, что вы тоже не используете MapR, но я считаю, что это возможно.
2. Запуск Impala на Hadoop 2.2.0. Это также возможно как CDH5 beta 1 release includes Hadoop 2.2.0, поэтому Impala версии 1.2 и выше должны работать. Пожалуйста, убедитесь, что вы используете последнюю версию (1.2.3 на данный момент), потому что в последних нескольких версиях меньших тонов имеется ряд важных исправлений.

Так что да, это возможно, хотя это, вероятно, не будет гладкой установки и там не много помощи для этого случая использования. Удачи!

Answer 2

Насколько я знаю, вы должны использовать CDH4, другие версии hadoop имеют проблему совместимости. ps: CDH3 недоступен для запуска impala.