В Hadoop количество карт определяется количеством входных расщеплений. Как насчет количества сокращений? Если есть метод, который мы можем интуитивно определить для сокращения? Я делаю сокращение карты в Pig.Определение количества сокращений в Hadoop
0
A
ответ
1
Идеальные редукторы должны быть оптимальное значение, которое получает их ближе всего к:
кратен размеру блока некоторое время задача от 5 до 15 минут Создает наименьшее количество файлов можно Ссылка: http://wiki.apache.org/hadoop/HowManyMapsAndReduces
0
С точки зрения данных количество редукторов равно количеству уникальных ключей на выходе карты.
Смежные вопросы
- 1. Определение количества циклов «while»?
- 2. Определение количества процессоров
- 3. Определение неизвестного количества переменных
- 4. Определение количества возможных комбинаций
- 5. Определение количества терминалов открыто
- 6. Определение количества выпадающих списков
- 7. Определение количества результатов ViewData
- 8. определение количества уровней серого
- 9. Определение количества параметров в лямбда
- 10. Определение сокращений и мостов в случайных графов с R
- 11. Hadoop Pig - Оптимизация количества слов
- 12. Установка количества задач/узла hadoop
- 13. Просмотр количества блоков для файла в hadoop
- 14. UITableView: динамическое определение количества разделов
- 15. Имеет ли определение configuration.class в hadoop 2.0?
- 16. Определение количества измерений массива Ada
- 17. Определение количества дивы с JQuery
- 18. Определение количества процессоров и ядер
- 19. Определение количества параметров, принятых методом
- 20. Определение количества байтов, используемых переменной
- 21. Определение количества экземпляров Amazon S3
- 22. Определение количества строк и количества элементов в строке
- 23. Обозначение сокращений в venneurler
- 24. Изменение сокращений в Zencoding
- 25. Определение количества элементов в массиве C
- 26. Определение количества ярусов в n-уровневом приложении
- 27. Определение оптимального количества кластеров в графе
- 28. CUDA: определение количества блоков нитей в сетке
- 29. Определение количества цифр в массиве чисел (C++)
- 30. Определение количества строк в заданной переменной?