В целях обработки данных между обратными вызовами в Scrapy, это Возможное определение класса atributes:request.META против класса atributes Scrapy
def __init__(self, *args, **kwargs):
self.my_var = 1
и использование:
self.my_var
вместо:
request.meta['my_var'] = 1