Я изучал данные веб-сайтов, используя Python Scrapy, хотя у меня есть сильный опыт работы с PHP cURL. Я не знаю, что лучше для очистки данных и обработки возвращаемых значений, скорости и использования памяти.PHP cURL vs Python Scrapy?
А что такое (выход) в Python Scrapy?
Scrapy - это каркас. Вы можете определить конвейеры и систематические способы обхода URL-адреса; cURL - это просто код плиты котла для запроса страницы или загрузки файлов по протоколу, например HTTP.
Если вы строите обширную систему скребков или проект, Scrapy, вероятно, лучше. В противном случае для хакерских или одноразовых вещей cURL трудно превзойти (или если вы ограничены PHP).