Строка поиска для конкретного значения =

Question

Я пытаюсь найти конкретное значение в ответ HTML с использованием библиотеки запросов

import requests 

while True: 

url = 'https://www.example.com/' 

page = requests.get(url, allow_redirects=True, verify=False) 

var = page.content 

значение, казалось бы, как словарь, но я не могу конвертировать весь ответ .content к dict, используя: var = dict (page.content), поскольку он дает ошибку "элемент последовательности обновления словаря # 0 имеет длину 1; требуется 2"

Я попытался использовать метод re.search, такой как это:

searchObj = re.search(r'(.*)id="X" value=(.*?) .*', var, re.M) 
if searchObj: 
    print "search --> searchObj.group() : ", searchObj.group() 

, но это не то, что я ищу - конечная цель состоит в том, чтобы найти конкретное значение в контенте, возвращенном из запроса веб-сайта, оно будет выглядеть примерно так: <input type="hidden" autocomplete="off" name="test" id="test" value="12345" /> - с данными, которые необходимо извлечь как значение = «12345» или более конкретно только 12345

заранее спасибо

Answer 1

Предпочтительно анализировать XML и HTML с использованием специализированной библиотеки, но если это одноразовая операция, а выход является предсказуемым, нормально использовать регулярное выражение. Следующие re должны работать.

r'id=\"test\"\svalue=\"(.*?)\"' 

(.*) в начале захватывает все.

Answer 2

не следует использовать регулярное выражение для этого использовать библиотеку, которая была сделана для того, например BeautifulSoup:

import bs4 as bs 
import requests 

resp = requests.get('http://www.google.com') 
soup = bs.BeautifulSoup(resp.text) 
element = soup.find(attrs={'id': 'hplogo'}) # will search for the 'google' logo 
print element 

>> <div align="left" id="hplogo" onload="window.lol&amp;&amp;lol()" style="height:110px;width:276px;background:url(/images/srpr/logo9w.png) no-repeat" title="Google"><div nowrap="" style="color:#777;font-size:16px;font-weight:bold;position:relative;top:70px;left:218px">׳™׳©׳¨׳�׳�</div></div> 

Answer 3

Это должно сработать для вас:

import re 
import requests 

VALUE_RGX = re.compile(r'id="X" value="([A-Za-z0-9_\-]+)"') 

url = 'https://www.example.com/' 
page = requests.get(url, allow_redirects=True, verify=False) 

matched_groups = VALUE_RGX.match(page.text) 
if len(matched_groups) > 1: 
    print("Found Value: {}".format(matched_groups[1])) 
else: 
    print("Did not find value..")