Улей с Lucene

Question

Можно ли использовать Hive для запроса индекса Lucene, который распространяется по Hadoop ???

Answer 1

Насколько я знаю, вы можете написать собственный код «извлечение строки» в Hive, чтобы я мог предположить, что вы могли бы. Я никогда не пользовался Луценой, и я едва использовал Хив, поэтому я не могу быть уверен. Если вы найдете более убедительный ответ на свой вопрос, напишите об этом!

Answer 2

Hadapt - это стартап, чьи программные мосты Hadoop с интерфейсом SQL (например, Hive) и гибридными системами хранения. Они предлагают функцию archival text search, которая может удовлетворить ваши потребности.

Отказ от ответственности: Я работаю для Hadapt.

Answer 3

Я знаю, что это довольно старый пост, но я подумал, что могу предложить лучшую альтернативу.

В вашем случае вместо того, чтобы перебирать ваш HDFS-указатель Lucene для схемы улей, лучше вставлять их в свиньи, потому что свиньи могут читать плоские файлы. Если вам не нужен реляционный способ хранения ваших данных, вы, вероятно, можете обработать их через Pig и использовать Hbase в качестве своей базы данных.

Answer 4

Вы можете написать собственный формат ввода для Hive для доступа к индексу lucene в Hadoop.