Недавно я встретил проект Storm для анализа в реальном времени. Мне было интересно, как Hadoop и Storm могут быть интегрированы для обработки данных. Также мне нужны предложения для различных проектов, которые используют комбинацию обоих. Спасибо ....Как интегрировать хаос и шторм?
-1
A
ответ
0
So Storm имеет концепцию болта & Spout.
Болт обрабатывает, пока носики получают данные в систему.
Storm предоставляет штекер-Hdfs-коннектор, через который вы можете записывать данные на диск непосредственно через болт.
Смежные вопросы
- 1. Есть ли способ интегрировать локальный хаос с дженкинсами?
- 2. Шторм и искра
- 3. Как испускать и собирать arraylist в шторм?
- 4. AppleScript Posix хаос
- 5. Мне нужен свиной хаос?
- 6. Как использовать FieldGroupings в шторм
- 7. Как установить улей на хаос в CentOS?
- 8. Шторм для пакетной обработки
- 9. Хорошо использовать шторм?
- 10. Проектирование топологии в шторм?
- 11. программа Шторм не работает
- 12. Шторм: когда использовать setNumTasks?
- 13. Шторм - топология к топологии
- 14. Шторм, управляющий тем, как болты испускают данные
- 15. как шторм HDFS написать другой путь файла
- 16. Шторм: Как получить латентность передачи между болтами?
- 17. шторм - обработка исключений в bolt.execute
- 18. установить шторм на окна 10
- 19. Совместим ли шторм Python 3?
- 20. Угловой хаос вызывает перенаправление на отказ
- 21. апач шторм цент зева 7
- 22. Apache шторм нимб: подключение отказался
- 23. Как интегрировать openCV и ARtoolkit
- 24. Как интегрировать AngularJS и CouchDB?
- 25. Как интегрировать PHP и JAVA?
- 26. Как интегрировать Oracle и Kafka
- 27. Как интегрировать Java и Python?
- 28. Как интегрировать яшму и gwt?
- 29. Как интегрировать Angularjs и Salesforce?
- 30. Как интегрировать codeigniter и PHPExcel?
Итак, используя этот разъем, мы фактически храним данные в реальном времени в Hdfs? и эти данные доступны для обработки с использованием картографов и редукторов. В любом случае спасибо за вашу помощь, также я просмотрю его, и я поделюсь, если я что-нибудь натолкну. – Mohit
Не могли бы вы рассказать мне об этом коннекторе, что я могу назвать? – Mohit
http://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.1.3/bk_user-guide/content/ch_storm-using-hdfs-connector.html – Venkat