Любые советы по отладке проблем со вторичной сортировкой в ​​Hadoop MapReduce?

Question

Я верю (поверь?) Я понимаю, как вторичный сорт работает в Hadoop. Я создал промежуточный ключ, состоящий из 4 полей. Я разделяю первое поле, группируюсь по первому и второму, и сортирую по всем 4.

Похоже, я собрал и разбил на разделы, но значения попадают в редуктор не по порядку.

Любые идеи относительно подхода к отладке этого?

Answer 1

На данный момент кажется, что просмотр статического кода вручную или с использованием инструментов работает хорошо. Я считаю, что я нарушил правило: при переопределении compareTo(), не забудьте переопределить equals() и hashCode(). Я буду держать все в курсе, если это решит проблему.