24-часовое отключение интернет-пауз скачать бесплатно

Question

Мой интернет-провайдер отключает подключение к моему соединению один раз в день. Если это происходит во время загрузки, загрузка просто приостанавливается, но не исключает никакого исключения.

Прямо сейчас я мог только подумать о потоковой загрузке, а затем проверить максимальное время или прочитать файл evey сейчас, а затем проверить, продолжает ли он расти.

функции я использую прямо сейчас:

def download_with_progress(url,localFileName,overwrite=False): 
    if not os.path.exists(localFileName) or overwrite == True: 
     urlretrieve(url, localFileName, reporthook=print_progress) 
     sys.stdout.write("\r") #remove previously printed percent sign 
     sys.stdout.flush() 

def print_progress(count, blockSize, totalSize): 
    total_MB = (totalSize)/(1000 * 1000) 
    current_MB = (blockSize * count)/(1000 * 1000) 
    percent = int(count*blockSize*100/totalSize)   
    sys.stdout.write("\r%d%% (%d/%d MB)" % (percent, current_MB, total_MB)) 
    sys.stdout.flush() 

Поскольку я уже здесь: это total_MB или current_MB правильно рассчитывается таким образом? Или я должен делить на 1024 * 1024? Я показываю их как закругленные int, так что это не проблема.

Answer 1

Вместо использования urllib2 используйте requests library; он устанавливает TCP Keep-Alive option, позволяя вам обнаруживать разъединения ISP.

Возможно, вам потребуется установить дополнительные параметры гнезда; urllib3 библиотеки использует select обнаружить, если сокеты все еще доступны, и устанавливает время ожидания, но добавление явного параметра KEEPALIVE к гнезду должна сделать обнаружение, немного Smoother еще:

import httplib 
import socket 

orig_connect = httplib.HTTPConnection.connect 
def new_connect(self): 
    orig_connect(self) 
    self.sock.setsockopt(socket.SOL_SOCKET, socket.SO_KEEPALIVE, 1) 
httplib.HTTPConnection.connect = new_connect