Максимальная емкость модуля re? Python

Question

Я использую python для веб-соскабливания. Все работало как масляный механизм, пока я не использовал его, чтобы получить описание продукта, которое на самом деле является простым описанием.

Итак, это не работает вообще, как если бы мое регулярное выражение было неправильным. К сожалению, я не могу сказать, какой сайт я выскабливание, чтобы показать вам реальный пример, но я на самом деле знаю, что регулярное выражение на самом деле хорошо ... это что-то вроде этого:

descriptionRegex = 'id="this_id">(.*)</div>\s*<div\ id="another_id"' 

for found in re.findall(descriptionRegex, response) : 
    print found 

Дело в том, что (. *) похож на 25000+ символов

Есть ли ограничение символов для поиска re.findall()? Есть ли способ добиться этого?

Answer 1

Необходимо указать re.DOTALL в своем обращении к .findall().

Если вы запустите эту программу, она будет вести себя, как вы запрашиваете:

import re 
response = '''id="this_id"> 
blah 
</div> <div id="another_id"''' 

descriptionRegex = r'id="this_id">(.*)</div>\s*<div\ id="another_id"' 

for found in re.findall(descriptionRegex, response, re.DOTALL) : 
    print found