Я работаю над проектом для домашних животных, чтобы сфотографировать фэнтезийную статистику футбола из моей собственной лиги фэнтези на ESPN. Проблема, с которой я сталкиваюсь в том, что я не могу пройти, - это логин, который необходим, прежде чем я смогу сделать запросы на страницу моей лиги.POST Http-запрос с объектом JSON
URL, я попал в
http://games.espn.com/ffl/leaguesetup/ownerinfo?leagueId=123456&seasonId=2016
и глядя на GET запросы, похоже, я попадаю на
Какие immedi меня достает в окно приглашения для входа в систему. Когда я вхожу в систему, я проверяю запрос POST и записываю все заголовок запроса. Похоже, запрашиваемый URL на POST является
https://registerdisney.go.com/jgc/v5/client/ESPN-FANTASYLM-PROD/guest/login?langPref=en-US
дополнительно я отметил следующие JSON возражали передается вместе:
{"loginValue":"myusername","password":"mypassword"}
с использованием заголовков запроса и объект JSON Я сделал следующие:
String url = "http://games.espn.com/ffl/leaguesetup/ownerinfo?leagueId=123456&seasonId=2016";
String rawData = "{\"loginValue\":\"myusername\",\"password\":\"mypassword\"}";
URL obj = new URL(url);
HttpURLConnection con = (HttpURLConnection) obj.openConnection();
con.setRequestMethod("POST");
con.setRequestProperty("Accept", "text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8");
con.setRequestProperty("Accept-Encoding", "gzip, deflate");
con.setRequestProperty("Accept-Language", "en-US,en;q=0.5");
con.setRequestProperty("Authorization", "APIKEY 8IYGqTgmpFTX51iF1ldp6MBtWrdQ0BxNUf8bg5/empOdV4u16KUSrnkJqy1DXy+QxV8RaxKq45o2sM8Omos/DlHYhQ==");
con.setRequestProperty("Cache-Control", "no-cache");
con.setRequestProperty("Content-Length", "52");
con.setRequestProperty("Content-Type", "application/json; charset=UTF-8");
con.setRequestProperty("Expires", "-1");
con.setRequestProperty("Host", "registerdisney.go.com");
con.setRequestProperty("Origin", "https://cdn.registerdisney.go.com");
con.setRequestProperty("Pragma", "no-cache");
con.setRequestProperty("Referer", "https://cdn.registerdisney.go.com/v2/ESPN-ESPNCOM-PROD/en-US?include=config,l10n,js,html&scheme=http&postMessageOrigin=http%3A%2F%2Fwww.espn.com%2F&cookieDomain=www.espn.com&config=PROD&logLevel=INFO&topHost=www.espn.com&ageBand=ADULT&countryCode=US&cssOverride=https%3A%2F%2Fsecure.espncdn.com%2Fcombiner%2Fc%3Fcss%3Ddisneyid%2Fcore.css&responderPage=https%3A%2F%2Fwww.espn.com%2Flogin%2Fresponder%2Findex.html&buildId=157599bfa88");
con.setRequestProperty("User-Agent", "Mozilla/5.0 (Windows NT 6.3; WOW64; rv:29.0) Gecko/20100101 Firefox/29.0");
con.setRequestProperty("conversation-id", "5a4572f4-c940-454c-8f86-9af27345c894, adffddd3-8c31-41a0-84d7-7a0401cd2ad0");
con.setRequestProperty("correlation-id", "4d9ddc78-b00e-4c5a-8eec-87622961fd34")
con.setDoOutput(true);`
OutputStreamWriter w = new OutputStreamWriter(con.getOutputStream(), "UTF-8");
w.write(rawData);
w.close();
int responseCode = con.getResponseCode();
BufferedReader in = new BufferedReader(new InputStreamReader(con.getInputStream()));
String inputLine;
StringBuffer response = new StringBuffer();
while ((inputLine = in.readLine()) != null) {
response.append(inputLine);
}
in.close();
As Подводя я на правильном пути, что я в настоящее время получать от сервера является сервер
возвращается код ответа HTTP: 400 для URL: https://registerdisney.go.com/jgc/v5/client/ESPN-FANTASYLM-PROD/guest/login?langPref=en-US
Любые идеи, что происходит, или если Я беру здесь полный неправильный подход? Я попытался использовать JSoup, но мне тоже не повезло, и я считаю, что JSoup также использует HttpUrlConnection.
Нужно ли сначала выполнить какой-либо запрос GET, сохранить что-то, затем выполнить запрос POST? Как это должно работать?
Я работал с Selenium раньше для автоматизации тестов пользовательского интерфейса, и он отлично работает, но это не совсем то, что я здесь. То, что я хочу/нужно, - это возможность получить HTML-код без необходимости запуска браузера. –
В настоящее время почти невозможно получить HTML-код с сложных веб-сайтов, особенно с пользовательскими взаимодействиями, без необходимости запуска браузера. Если вы хотите подражать одному взаимодействию, вы можете программно пройти (управление кукисами не забавно), но этот подход не масштабируется. – Julien