Я заинтересован в распределенной обработке изображений. У меня есть кластер Hadoop из 32 узлов, и я хочу распространять изображения на узлах, обрабатывать их, а затем собирать результат из каждого из них (более похоже на уменьшение карты). Пожалуйста, объясните все возможные способы распределенной обработки изображений (например, с использованием распределенного сервера Matlab, используя кластер Hadoop и т. Д.).Как интегрировать matlab с hadoop
ответ
Я не уверен в Matlab и как он может экспортировать данные из него, но для Hadoop стороны я бы рекомендовал использовать сервис Hadoop Storm. Вы можете организовать шлюз для своих изображений внутри брокера сообщений Kafka. Там вы можете нажать изображения. В Storm вы можете создать собственный рабочий процесс для своих изображений. Вы можете выполнить некоторые алгоритмы компьютерного зрения на них, например, или просто сохранить их в HDFS или HBase или в любом другом соответствующем хранилище. Если вы можете экспортировать данные из mathlab в Kafka, возможно, с помощью некоторого автономного сервиса, то Storm, безусловно, ваш путь.
MATLAB имеет функцию mapreduce
, которую вы можете использовать с кластером Hadoop. В документации Parallel Computing Toolbox описано here - на странице показан полный пример запуска mapreduce
на кластере Hadoop. Вам понадобится лицензия Parallel Computing Toolbox на вашем рабочем столе и MATLAB Distributed Computing Server лицензии для вашего кластера Hadoop.
- 1. Как интегрировать Cassandra с Hadoop
- 2. Как интегрировать? Hadoop с Mysql
- 3. Как интегрировать NLTK с Hadoop HDFS?
- 4. Как интегрировать hadoop с zookeeper и hbase
- 5. Как интегрировать MATLAB в TensorFlow?
- 6. Как интегрировать библиотеку кода Matlab с Android?
- 7. Как интегрировать Matlab, производящий dll с .net?
- 8. Можно ли интегрировать Hadoop с Python?
- 9. Как интегрировать вектор в MATLAB
- 10. Как интегрировать eclipse и hadoop 2.6
- 11. Как интегрировать Cassandra с Hadoop, чтобы воспользоваться преимуществами Hive
- 12. Как интегрировать свинью с кассандра на hadoop 2.2.0?
- 13. Как интегрировать сигнал зубьев пилы в matlab
- 14. Как интегрировать многомерную функцию в MatLab?
- 15. Как интегрировать по треугольнику в MATLAB?
- 16. Как интегрировать дифференциальное уравнение в MATLAB?
- 17. Можно ли интегрировать Kdb + и hadoop?
- 18. Как интегрировать матричную функцию в Matlab?
- 19. Как интегрировать линию наилучшего соответствия в MatLab?
- 20. Как интегрировать эту встроенную функцию в matlab
- 21. Как использовать код MATLAB в mapper (Hadoop)?
- 22. Ищете Гео пространственную библиотеку можно интегрировать с Hadoop
- 23. Как интегрировать матрицы (сумма матриц с интервалом dx) в MATLAB?
- 24. Необходимо интегрировать Informatica с улей
- 25. Подключение r с Hadoop
- 26. Как интегрировать хаос и шторм?
- 27. Как интегрировать скомпилированный код matlab в C++ в системе Debian
- 28. Как интегрировать проект matlab в приложение Windows C#
- 29. Как es-hadoop (ElasticSearch-Hadoop) делает Hadoop?
- 30. Как интегрировать весну с GWT?