Пример Hadoop WordCount - Реализация Сортировка

Question

Я новичок Hadoop. Мне удалось успешно запустить пример WordCount.

Я хотел бы изменить этот пример таким образом, чтобы мой результат сортировался в порядке возрастания количества. Я не могу понять, где мне нужно будет внести необходимые изменения.

Было бы здорово, если бы кто-то дал мне какое-то направление для осуществления сортировки?

Answer 1

См org.apache.hadoop.examples.Sort

Это не супер-просто сделать с помощью карты/уменьшить. Это включает в себя получение гистограммы ваших данных и использование TotalOrderPartitioner.

В качестве альтернативы вы можете использовать Hive или Pig, которые имеют встроенные функции для сортировки.