Scrape <frameset> содержание с использованием cURL

Question

Как использовать cURL для очистки от страницы, которая скрывает данные, которые мне действительно интересны внутри одной из фреймов <frameset>?

Answer 1

Хорошо, когда мне нужно, чтобы очистить вещи, которые немного более сложным, я большой поклонник Perl и модуль WWW :: Механизируйте http://search.cpan.org/dist/WWW-Mechanize/lib/WWW/Mechanize.pm

Есть примеры на странице модуля, но если вы делаете поиск google для «Screen scraping with perl», вы найдете всевозможные примеры. Он также может управлять файлами cookie.

ПРИМЕЧАНИЕ: Я уверен, что все это может быть выполнено с помощью нескольких запросов на завивки и некоторых grep'ing - но мой опыт был в основном с Perl.