2014-09-29 5 views
2

Я новичок в flume и hadoop. У меня есть одно сомнение: можем ли мы использовать лоток без настройки хаопа?Apache Flume без hadoop

Может ли кто-нибудь поделиться своими знаниями?

ответ

4

Да Flume может работать совершенно независимо от hadoop. Однако он имеет некоторые зависимости пакетов от HDFS. Если вы не планируете использовать HDFS-приемник, вы можете использовать его без Hadoop

+1

@Amar ... можем ли мы использовать раковину file_roll? – user3797438

+1

да, вы можете подать рулонную раковину без hadoop – Amar

+0

Спасибо за ур ответ ... можете поделиться файлом конфигурации для file_roll ... У меня есть это ... но он показывает, что каталог не является нулевым – user3797438

0

Да! Что касается моей недавней конфигурации потока [source = Twitter, channel = memory], я использовал loggerSink, чтобы поместить потоковые «данные» в файл журнала в файловой системе (файл unix-файла), вам просто нужно что-то сделать для данных придавать смысл. Существуют другие раковины, доступные как часть установки флюма (HDFSSink, HBaseSink, IRC, File Roll, check https://flume.apache.org/FlumeUserGuide.html для более подробной информации и использования), или вы можете создать новый.

Смежные вопросы