Как сохранить ответ в Scrapy?

Question

Я хочу сохранить ответ запроса в scrapy. На данный момент есть следующий код.

 yield Request(requestURL, 
        callback=self.afterResponse) 

Теперь то, что я хочу, чтобы не вызвать функцию afterResponse по прибытию ответа, но хранить его здесь как-то так, что я могу извлечь данные из ответа на то же место.

Answer 1

Создайте некоторую переменную (это может быть даже список, если вам нужно сохранить больше данных) в этом паук и сохранить в нем данные.

Или создайте/откройте файл и напишите его как pickle или что-то в этом роде.