Есть ли скребок, например, KimonoLabs?

Question

Я много раз использовал scrapy и красивый суп, однако найти решение для кимолабов намного проще и быстрее. Единственная проблема заключается в том, что иногда задания нуждаются в небольшой настройке, что невозможно (например, сканирование с использованием уникального шаблона).

Есть ли другое решение, которое сочетает в себе легкость с дополнительной сложностью? В основном я хочу определить шаблон скрепок страницы с использованием интерфейса WYSIWYG, а затем программно написать сканер.

Answer 1

Полное раскрытие информации: Я являюсь одним из основателей ParseHub.

ParseHub пытается решить именно эту проблему. Это дает вам gui и мощные инструменты для визуального определения шаблонов и возвращается к подмножеству javascript, если вам нужно более мелкомасштабное управление. Доступны все примитивы программирования, которые вы знаете (если, для, перерыв, рекурсия и т. Д.).

Вы можете найти его на www.parsehub.com

Answer 2

Используйте Import.io экстрактор.

1. Download браузер Import.io
2. Create an extractor (то, что вы называете "выскабливание шаблон")
3. Из кода use the extractor's REST API

Answer 3

Try Данные соскоб Студия

Если вы ищете настольное приложение, Data Scraping Studio имеет такую ​​же плюс больше возможностей, как и в кимоно. Или вы можете установить его на сервере окон, чтобы сделать свой собственный Кимоно ++

FYI: У нас есть план, чтобы запустить облачное решение и REST API к апрелю 2016

Вы можете увидеть более подробную информацию о сайт (www.datascraping.co)

Раскрытие: Я один из основателей