2015-04-29 6 views
-1

Недавно я встретил проект Storm для анализа в реальном времени. Мне было интересно, как Hadoop и Storm могут быть интегрированы для обработки данных. Также мне нужны предложения для различных проектов, которые используют комбинацию обоих. Спасибо ....Как интегрировать хаос и шторм?

ответ

0

So Storm имеет концепцию болта & Spout.

Болт обрабатывает, пока носики получают данные в систему.

Storm предоставляет штекер-Hdfs-коннектор, через который вы можете записывать данные на диск непосредственно через болт.

+0

Итак, используя этот разъем, мы фактически храним данные в реальном времени в Hdfs? и эти данные доступны для обработки с использованием картографов и редукторов. В любом случае спасибо за вашу помощь, также я просмотрю его, и я поделюсь, если я что-нибудь натолкну. – Mohit

+0

Не могли бы вы рассказать мне об этом коннекторе, что я могу назвать? – Mohit

+0

http://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.1.3/bk_user-guide/content/ch_storm-using-hdfs-connector.html – Venkat

Смежные вопросы