Любая альтернатива для Apache Nutch?

Question

Я ищу решение, как показано ниже:

1- поиск заданного ключевого слова в поисковых системах (Google, Yahoo ...)

2- получить результаты (ссылки)

3- перейдите к ссылкам и извлечению содержимого и ...

После краткого исследования я нашел «Apache Nutch», я просто хочу знать ваше предложение.

У вас есть рекомендации по этому решению?

Есть ли лучшее решение для объяснения?

Я разработчик python, и я знаком с такими инструментами, как «Scrapy».

Thank you.

Answer 1

Для пошагового поискового запроса, посетите http://blog.building-blocks.com/technical-tips/building-a-search-engine-with-nutch-and-solr-in-10-minutes