BeautifulSoup найти ссылки, которые соответствуют критериям

Question

Я пытаюсь собрать все ссылки на веб-странице, которую я собрал через красивый суп, содержащий /d2l/lp/ouHome/home.d2l?ou=.

Фактические ссылки будут выглядеть эти:

"http://learn.ou.edu/d2l/lp/ouHome/home.d2l?ou=1234567" 
"http://learn.ou.edu/d2l/lp/ouHome/home.d2l?ou=1234561" 
"http://learn.ou.edu/d2l/lp/ouHome/home.d2l?ou=1234564" 
"http://learn.ou.edu/d2l/lp/ouHome/home.d2l?ou=1234562" 
"http://learn.ou.edu/d2l/lp/ouHome/home.d2l?ou=1234563" 

Answer 1

Вы можете передать compiled regular expression как href значение аргумента в find_all():

soup.find_all('a', href=re.compile(r'/d2l/lp/ouHome/home\.d2l\?ou=\d+')) 

Демо:

>>> import re 
>>> from bs4 import BeautifulSoup 
>>> 
>>> data = """ 
... <div> 
...  <a href="http://learn.ou.edu/d2l/lp/ouHome/home.d2l?ou=1234567">link1</a> 
...  <a href="http://learn.ou.edu/d2l/lp/ouHome/home.d2l?ou=1234561">link2</a> 
...  <a href="http://learn.ou.edu/d2l/lp/ouHome/home.d2l?ou=1234564">link3</a> 
...  <a href="http://learn.ou.edu/d2l/lp/ouHome/home.d2l?ou=1234562">link4</a> 
...  <a href="http://learn.ou.edu/d2l/lp/ouHome/home.d2l?ou=1234563">link5</a> 
... </div> 
... """ 
>>> 
>>> soup = BeautifulSoup(data) 
>>> links = soup.find_all('a', href=re.compile(r'/d2l/lp/ouHome/home\.d2l\?ou=\d+')) 
>>> for link in links: 
...  print link.text 
... 
link1 
link2 
link3 
link4 
link5