spider не сканирует веб-страницу

Question

Привет всем Я пытаюсь запустить этот python code, но это не дает мне требуемый результат, который я хочу напечатать все ссылки, доступные на теле предоставления веб-страницы, но он дает это output вместо этого, помогите мне Благодаря

Answer 1

для того, чтобы напечатать журнал, вы должны использовать logging в вашем паука с

self.logger.debug('%s', response.url) 

Но ваш паук является неправильным, так как метод синтаксического анализа должен возвращать итератор, читать documentation для более помогает