Я вижу различные комбинации версий Nutch и Solr, которые люди публикуют по этой теме в Интернете. Каковы последние стабильные (не бета-версии) и совместимые версии Nutch и Solr, которые я могу загрузить и настроить без создания источников и просто настройки?Последние совместимые версии Nutch и Solr
Вы можете использовать Nutch 2.1 или Nutch 1.6. Если вы хотите использовать HBase, вам нужно использовать Nutch 2.x. Потому что nutch 1.6 не поддерживает Hbase. Я использую nutch 2.1, HBase 0.90.x или 0.94.5 и Solr 4.3.0.
Существуют значительные изменения между двумя версиями Solr (Solr 3.x и Solr 4.x). Вы должны выбрать один из них в соответствии с вашим требованием. Пример: поддержка Solr4 cloud лучше.
Какая ОС вы используете?
В Windows Nutch 1.2 была последняя версия, с которой мне удалось работать.
В Linux Nutch 1.6 отлично работает с SOLR.
Это было в сочетании с SOLR 3.5 (из-за других зависимостей), но нет никаких оснований для того, чтобы он не работал с SOLR 3.6 или 4.3.
Я реализовал Nutch 1.6 и Solr 3.6.2 в систему производства ранее в этом году для крупной финансовой компании. Они отлично работают вместе.
, вы использовали Tomcat или Jetty для Solr? – MarioCannistra
Я использовал оба, и в обоих случаях они проксируются через Apache. – Claude
Привет Клод. Вы когда-нибудь пробовали Nutch 2.2.1 с HBase в производственную систему? – sunskin
Вот некоторые предложенные совместимые версии Nutch и Solr, основанные на том, что создатели Nutch в объявляют на своем веб-сайте here:
+-------+--------+
| Nutch | Solr |
+-------+--------+
| 2.3.1 | 4.10.3 |
| 2.3 | 4.8.1 |
+-------+--------+
Вы можете добавить больше вариантов. Инструмент, который я использовал для создания этой таблицы, можно найти here.
Я использую -
И это комбинация работает отлично!
Я использую Ubuntu Server 12.04 LTS. Я только что попробовал SOLR 4.3.0 и Nutch 1.6. Оба работают (Solr работает в Tomcat и Nutch успешно обход небольшой сайт). Когда я попытался запустить команду Nutch solrindex, чтобы их интегрировать и проиндексировать обходной сайт с помощью solr, я получил java.io.IOException Job failed! ошибка. Не более подробная информация в журналах solr или nutch. Мне интересно, возможно ли это из-за несовместимости между двумя версиями ... – MarioCannistra
Версия Tomcat - 7 – MarioCannistra
Файл hadoop.log обычно имеет более подробную информацию. Можете ли вы опубликовать трассировку стека ошибки? Если нет более подробной информации, попробуйте изменить conf/log4j.properties и измените уровни отладки от INFO до DEBUG – nimeshjm