Есть ли способ контролировать работу процессов Hive и убедиться, что они действительно работают параллельно?Hive/Hadoop: Мониторинг текущих процессов
Я установил экспериментальный кластер Linux (4 машины) и хотел бы понять основные процессы.
top и ps не дают мне слишком много информации.
Hive запрос делится на несколько MR называется sql_text стадии 1, sql_text стадии-2 и т.д.
Вы можете ввести пользовательский интерфейс JobTracker веб-интерфейс вашего кластера на
job_tracker_adress: 50030
Там вы увидите улья рабочих мест и их прогресс.
Для каждого задания будет список задач и для каждой задачи вы можете увидеть, на каких узлах они работают, и их основные статистические данные
Отлично, спасибо! – JB2
Что вы хотите контролировать? –