HttpWebResonse зависает по нескольким запросам

Question

У меня есть приложение, которое создает много веб-запросов для загрузки страниц новостей на веб-сайте (я тестировал многие веб-сайты) через некоторое время выясняю, что приложение замедляется в извлечении html-источника, я обнаружил, что HttpWebResonse не получает ответ. Я отправляю только функцию, выполняющую эту работу.

public PageFetchResult Fetch() 
    { 
     PageFetchResult fetchResult = new PageFetchResult(); 
     try 
     { 
      HttpWebRequest req = (HttpWebRequest)HttpWebRequest.Create(URLAddress); 
      HttpWebResponse resp = (HttpWebResponse)req.GetResponse(); 
      Uri requestedURI = new Uri(URLAddress); 
      Uri responseURI = resp.ResponseUri; 
      if (Uri.Equals(requestedURI, responseURI)) 
      { 
       string resultHTML = ""; 
       byte[] reqHTML = ResponseAsBytes(resp); 
       if (!string.IsNullOrEmpty(FetchingEncoding)) 
        resultHTML = Encoding.GetEncoding(FetchingEncoding).GetString(reqHTML); 
       else if (!string.IsNullOrEmpty(resp.CharacterSet)) 
        resultHTML = Encoding.GetEncoding(resp.CharacterSet).GetString(reqHTML); 

       resp.Close(); 
       fetchResult.IsOK = true; 
       fetchResult.ResultHTML = resultHTML; 
      } 
      else 
      { 
       URLAddress = responseURI.AbsoluteUri; 
       relayPageCount++; 
       if (relayPageCount > 5) 
       { 
        fetchResult.IsOK = false; 
        fetchResult.ErrorMessage = "Maximum page redirection occured."; 
        return fetchResult; 
       } 
       return Fetch(); 
      } 
     } 
     catch (Exception ex) 
     { 
      fetchResult.IsOK = false; 
      fetchResult.ErrorMessage = ex.Message; 
     } 
     return fetchResult; 
    } 

любое решение будет весьма признателен

Answer 1

Fetch функция вызывается рекурсивно и всегда создает HttpWebRequest, но выпускать только тогда, когда URL подобран. Вы должны закрыть запрос и ответ в инструкции else.

Answer 2

Я согласен с @volody, также у HttpWebRequest уже есть свойство MaximumAutomaticRedirections, которое установлено в 50, вы можете установить его на 5, чтобы автоматически достичь того, что вы ищете в этом коде, так или иначе, оно вызовет исключение, и это будет обрабатываться вашим кодом.

Просто установите

request.MaximumAutomaticRedirections = 5;