2017-02-03 2 views
-3

Mapreduce работает по парам ключ-значение по умолчаниюПо умолчанию искра имеет обработку пары «ключ-значение»?

Он имеет в основном две фазы.

  1. Карта
  2. Уменьшить

Мой вопрос

  1. ли Искра работает в терминах пары ключ-значение по умолчанию?

  2. Есть ли у искры фаза карты и фаза уменьшения?

ответ

0

Спарк интегрируется с Hadoop API, так:

  1. Спарк поддерживает, среди прочего, ключ-значение операции пара прямо из коробки после того, как вы сопоставили свои данные пар ключ-значение.
  2. Spark поддерживает работу с картой и сокращает операции прямо из коробки.
Смежные вопросы