Скремблирование данных с веб-сайта с использованием Python 2

Question

Я пытаюсь очистить данные с фондового рынка, но я ничего не теряю, когда распечатываю данные. Я хочу цену яблока.

import urllib 
import re 



htmlfile = urllib.urlopen("http://finance.yahoo.com/q?s=AAPL&q1=1") 

htmltext = htmlfile.read() 

regex = '<span class="Fw(b) Fz(36px) Mb(-4px)" data-reactid="270">(.+?)</span>' 

pattern = re.compile(regex) 

price = re.findall(pattern,htmltext) 

print price 

Answer 1

Можете ли вы подробно рассказать о том, что именно вы пытаетесь извлечь со страницы? Мне удалось вытащить тэг с помощью кода ниже (Примечание: использует Python 3, BeautifulSoup и запросы, все из которых я рекомендую для веб-очистки, а также для выяснения того, что вам нужно поставить для переменной заголовков, я предлагаю: http://www.whatsmyua.com/)

import requests 
from bs4 import BeautifulSoup 

url = 'http://finance.yahoo.com/q?s=AAPL&q1=1' 

headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64; Trident/7.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; InfoPath.3; .NET4.0C; .NET4.0E; rv:11.0) like Gecko'} 

r = requests.get(url, headers=headers) 

soup = BeautifulSoup(r.text, "html.parser") 

for item in soup.find_all('span', {"class":"Fw(500) Pstart(10px) Fz(24px) C($dataRed)"}): 
    print(item)