Можем ли мы использовать Hadoop только для регистрации или просто для отчетности? Так что я могу экспериментировать с различными вещами, такими как ведение журнала с писцом и отчетность с помощью Hadoop.Регистрация и отчетность Hadoop
Вы уже ответили на вопрос, есть проекты, такие как лоток, писарь, который может помочь вам собрать журналы, и вы можете сделать агрегацию на этом. Вы также можете обратиться к следующим для других проектов
http://blog.treasure-data.com/post/13766262632/real-time-log-collection-with-fluentd-and-mongodb
http://incubator.apache.org/projects/flume.html
Hadoop имеет как экономическое хранение и мощный анализ данных. HDFS - отличное место для размещения журналов и т. П., Потому что цена за терабайт по сравнению с другими решениями очень низка. Кроме того, когда ваши данные находятся в HDFS, он очень доступен с помощью MapReduce. Весь шаг с Hadoop тоже заключается в том, что вы не должны выбрасывать данные. Вы должны собрать все это, и через MapReduce начните анализировать его и получить информацию, которую вы иначе не имели бы.
Я имел в виду, что могу использовать Hadoop только для регистрации или только для отчетности. Я знаю, что мы можем делать сообщения через свиньи и т. Д. но я хочу знать, насколько он эффективен для одной цели. – JustCoding