Прочитать текстовые данные с сайта

Question

Моя программа рекурсивно обрабатывает строку, чтобы отменить ее. Я хотел бы, чтобы он извлекал данные непосредственно с веб-сайта, а не текстовый файл, как в настоящее время, но я не могу заставить его извлекать данные с веб-сайта.

import urllib.request 

def reverse(alist): 
    #print(alist) 
    if alist == []: 
     return [] 
    else: 
     return reverse(alist[1:]) + [alist[0]] 

def main(): 
    #file1 = urllib.request.urlopen('http://devel.cs.stolaf.edu/parallel/data/cathat.txt').read() 
    file1 = open('cat.txt','r') 
    for line in file1: 
     stulist = line.split() 
     x = reverse(stulist) 
     print(' '.join(x)) 
    file1.close() 

main() 

Записанные строки должны показать, что я пробовал.

Answer 1

Вы можете использовать URL, обычно в виде файла:

import urllib 
... 
f = urllib.urlopen(url) 
for line in f: 
    ... 
f.close() 

То, что вы сделали, чтобы позвонить read на открытой ссылке. Итак, вы прочитали весь контент в переменной file1, а file1 стал строкой.

Для Python 3:

import urllib.request 
... 
f = urllib.request.urlopen(url) 
for line in f: 
    ... 
f.close() 

Кроме того, необходимо преобразовать каждую строку в правильной кодировке. Если кодировка utf-8, то вы можете сделать следующее:

for line in f: 
    line = line.decode("utf-8") 

Answer 2

import urllib2 

def reverse(alist): 
    if alist == []: 
     return [] 
    else: 
     return reverse(alist[1:]) + [alist[0]] 

def main(): 

    lines = [line.strip() for line in urllib2.urlopen('http://devel.cs.stolaf.edu/parallel/data/cathat.txt')] 
    print lines 
    print lines[::-1] 
main() 

Выход

['The cat in the party hat', 'wore the hat', 'to the cat hat party.'] 
['to the cat hat party.', 'wore the hat', 'The cat in the party hat']