Я использую редуктор карты на Hadoop на Elastic Map Reduce (на AWS), но он сортирует его как строку, я хочу сделать целочисленную сортировку. Как это сделать ? Я хочу взять ключ как целое и выполнить целую сортировку по ключу.Force integer sort в Hadoop на Elastic Map Reduce (AWS)
1
A
ответ
2
Я рекомендую предварительно отложить (или отложить) целое число с ведущими нулями, чтобы вы могли использовать Hadoop (или EMR) для лексической сортировки. Hadoop не поддерживает сортировку по целочисленным параметрам - это просто лексическая сортировка.
Например, если эти ключи:
1
15
168
1900
Выведите их, как это в вашем картографа:
0001
0015
0168
1900
так, что Hadoop может правильно сортировать их.
0
Ответы на этот вопрос могут быть использованы без изменения данных: how to sort numerically in hadoop's shuffle/sort phase?
Смежные вопросы
- 1. Hadoop на EC2 vs Elastic Map Reduce
- 2. Исключение в потоке «main» java.lang.NoClassDefFoundError в AWS Elastic Map Reduce
- 3. Hadoop map/reduce chaining
- 4. Hadoop Map-Reduce. RecordReader
- 5. Запуск Hadoop Map-Reduce Job
- 6. Hadoop Map Reduce - Количество редукторов
- 7. Hadoop Map-Reduce картографа программирование
- 8. Benchmarking Hadoop Map-Reduce application
- 9. Hadoop Map/Reduce Распределение вакансий
- 10. Использование grep map-reduce program на hadoop
- 11. Когда использовать NLineInputFormat в Hadoop Map-Reduce?
- 12. Amazon Elastic Map Сокращение Hadoop Вакансии
- 13. Map and Reduce class Attributes в Hadoop
- 14. AWS Elastic Map Уменьшить: вывести на SimpleDB
- 15. Hadoop map-reduce: порядок записей при группировке
- 16. Как использовать Hadoop/Map-Reduce/etc?
- 17. Объединение результатов от hadoop map-reduce
- 18. данные Mutiple MySQL таблиц Hadoop Map-Reduce
- 19. Сформированный составной ключ, Hadoop Map-Reduce?
- 20. получение java.lang.NullPointerException Hadoop Map-Reduce программу
- 21. Файл не на AWS кэширование Elastic Map Сокращение
- 22. Добавить входные данные на лету в Hadoop Map-Reduce Job?
- 23. Queing and Map/Reduce
- 24. Почему у нас есть функции в sort(), reduce(), map(), filter()?
- 25. Невозможно выполнить задачу Map/Reduce
- 26. Группировка диапазона значений в Map Reduce в Java Hadoop 2.2
- 27. Как получить доступ к DistributedCache в Hadoop Map/Reduce jobs?
- 28. Elasticsearch эквивалентен Map-Reduce
- 29. Hbase Map-Reduce функция выдает
- 30. Выполнение нескольких заданий в программе Map/Reduce Hadoop