Почему мой веб-запрос C# не возвращает ничего?

Question

Я нахожу URL-адрес, который возвращает длинный набор JSON (ДЕЙСТВИТЕЛЬНО длинный, 20 миллионов символов). Просто вставляя URL-адрес в Chrome, для возврата полного набора результатов требуется около 3 минут. Какими бы ни были настройки по умолчанию в Chrome, он несколько раз запрашивает у меня либо «Убить страницу», либо «Подождите». Но страница вернется через несколько минут.

Я запускаю это из SSIS с задачей скрипта. Я не очень хорошо знаком с C#. Я скопировать/вставить этот код из образца:

{ 

    HttpWebRequest httpWReq = (HttpWebRequest)WebRequest.Create(wUrl); 
    httpWReq.Method = "GET"; 
    httpWReq.ContentType = "application/json"; 
    httpWReq.Timeout = 300000; 
    HttpWebResponse httpWResp = (HttpWebResponse)httpWReq.GetResponse(); 
    RootObject jsonResponse = null; 

    try 
    { 
     //Get the stream of JSON 
     Stream responseStream = httpWResp.GetResponseStream(); 

     //Deserialize the JSON stream 
     using (StreamReader reader = new StreamReader(responseStream)) 
     { 
      //Deserialize our JSON 
      DataContractJsonSerializer sr = new DataContractJsonSerializer(typeof(RootObject)); 
      jsonResponse = (RootObject)sr.ReadObject(responseStream); 
     } 
    } 
    //Output JSON parsing error 
    catch (Exception e) 
    { 
     FailComponent(e.ToString()); 
    } 
    return jsonResponse; 

Я 110% уверен, что строка wURL является допустимым JSON конечной точки. Когда я пошагово моего кода, он ждет, может быть, 15 секунд на этой линии:

HttpWebResponse httpWResp = (HttpWebResponse)httpWReq.GetResponse(); 

... и затем возвращается без ошибок ... но это не заселить то, что я ожидал бы в httpWResp (ContentLength = -1). Когда он достигает:

jsonResponse = (RootObject)sr.ReadObject(responseStream); 

... jsonResponse содержит мой предварительно определенный контейнерный объект json, установленный в null. Из моего URL-адреса возвращаются тысячи json-массивов.

Я не вижу никаких интересных атрибутов в responseStream, которые указывали бы, что на самом деле он содержит что-нибудь?

Что мне здесь не хватает?

Я не могу опубликовать фактический URL, потому что это URL частной компании.

=================================

EDIT: Я попробовал URL с гораздо более короткая строка, и она вернулась. Таким образом, это похоже на длину. Я запустил возвращаемое значение через валидатор, и он преуспел ... возможно, особый персонаж, но я думаю, что это длина.

Answer 1

Из комментариев мы теперь знаем, что объект ответа вы получите обратно из GetResponse() имеет StatusCode из OK и ContentType из приложения/JSON, кодировка = UTF-8 - указывает, что сервер возвратил данные «chunked», поэтому ContentLength = -1.

Вы должны быть в состоянии использовать метод ReadToEnd() на StreamReader, что-то вроде этого:

//Deserialize the JSON stream 
using (StreamReader reader = new StreamReader(responseStream)) 
    { 
     string r = reader.ReadToEnd(); 

     //Deserialize our JSON 
     DataContractJsonSerializer sr = new DataContractJsonSerializer(typeof(RootObject)); 
     MemoryStream ms = new MemoryStream(Encoding.UTF8.GetBytes(r)); 
     jsonResponse = (RootObject)sr.ReadObject(ms); 
}