Пользовательский агент Android в URLConnection

Question

Я пытаюсь «обмануть» Google Finance, думая, что я веб-браузер, изменив свойство агента пользователя в своем соединении. Тем не менее, ответ, который я получаю обратно, не то, что я должен получить, когда я использую фактический веб-браузер. Мне было интересно, почему это так, и что мне нужно сделать, чтобы он работал? Вот соответствующий код («Сайт» является https://www.google.co.uk/finance/converter?a=1&from=GBP&to=USD):

protected static String readURL(String site) { 
    StringBuilder buff = new StringBuilder(); 
    try { 
     HttpURLConnection conn = (HttpURLConnection) new URL(site).openConnection(); 
     conn.setRequestProperty("User-Agent", "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/51.0.2704.79 Safari/537.36 Edge/14.14393"); 
     conn.connect(); 
     BufferedReader bfr = new BufferedReader(new InputStreamReader(conn.getInputStream())); 
     String inputLine; 
     while ((inputLine = bfr.readLine()) != null) 
      buff.append(inputLine).append('\n'); 
     bfr.close(); 
    } 
    catch (Exception ioe) { 
     System.err.println("Failed to read from \""+site+"\": "+ioe.getMessage()); 
    } 
    return buff.toString(); 
} 

EDIT: Я хотел бы отметить, что это в Android приложения, а не Java один. Он также не отображается пользователю в WebView или что-то еще, это происходит в фоновом режиме.

Answer 1

Веб-форма, кажется, ведет себя нормально, не сбрасывая с помощью пользовательского агента. Этот запрос Модифицированная возвращает правильный ответ: запрос

D/TAG: currency_converter_result>5 GBP = <span class=bld>6.3645 USD 

дооснащения:

 final Map<String,String> fieldMap = new HashMap<>(); 

     fieldMap.put("a","5"); 
     fieldMap.put("from","GBP"); 
     fieldMap.put("to","USD"); 

     RequestBody requestBody = RequestBody.create(MediaType.parse("text/plain"), ""); 
     final Retrofit retrofit = new Retrofit.Builder() 
       .baseUrl("https://www.google.co.uk") 
       .build(); 

     final ConversionService wService = retrofit.create(ConversionService.class); 
     Call<ResponseBody> data = wService.convertCurrency(fieldMap); 

     data.enqueue(new Callback<ResponseBody>() { 
      @Override 
      public void onResponse(Call<ResponseBody> call, Response<ResponseBody> response) { 
       String resp = ""; 

       if (response.body() != null) { 
        try { 
        resp = response.body().string(); 
        int index = resp.indexOf("currency_converter_result"); 
        int end = resp.indexOf("</span>", index); 
        String result = resp.substring(index, end); 
        Log.d("TAG", result); 
        } catch (IOException e) { 
        } 
       } 
      } 

      @Override 
      public void onFailure(Call<ResponseBody> call, Throwable t) { 

       Log.e(TAG,"Failure"); 
      } 
     }); 

    } 

ConversionService.java

public interface ConversionService { 

    @GET("/finance/converter") 
    Call<ResponseBody> convertCurrency(@QueryMap Map<String,String> queryMap); 
}