Spring-XD spring application for bigdata

Question

Я новичок в Spring-XD и имею только базовую идею, что он помогает хранить огромные данные в файлах hadoop в качестве файлов. Я хотел бы разработать мое приложение для сохранения данных, поступающих в сокет, используя Spring-XD для hadoop.

Возможно ли это? Если да, то кто-нибудь может указать мне на некоторые примеры, где это было сделано? Пожалуйста, не перенаправляйте меня на https://github.com/spring-projects/spring-xd. В нем нет ни одного примера того, как записать файл в конфигурацию hadoop и соединения hadoop.

Заранее спасибо.

Answer 1

Возможно, вы захотите рассмотреть возможность использования Spring Cloud Data Flow, поскольку он является преемником Spring XD. Вы можете использовать приложение-источник hdfs на основе того, нужно ли читать/записывать из/в HDFS.

Вы все еще можете попробовать образцы Spring XD here, чтобы получить представление об этом.