Dynamic IMDb scrapper, чтобы увидеть оцененных личностей

Question

Я хочу создать онлайн-динамический рейтинг участников/режиссеров из их данных IMDb. Ранее я использовал BeautifulSoup для создания автономной версии для фильмов. Но, поскольку прошло более двух лет, топ-250 рейтинга изменились.

Есть ли специальный рекомендуемый метод создания онлайн-рейтинга? Я слышал о Scrapy + Flask, но я понятия не имею о них.

Answer 1

IMDB выпускает данные в виде обычного текста, и вам не нужно его очищать - http://www.imdb.com/interfaces. Диффы выпускаются еженедельно. (Чтобы все не нужно было загружать снова и снова)