Отправка данных POST с помощью библиотеки запросов в Python

Question

Я не могу отправить данные POST для доступа к моей учетной записи, используя библиотеку запросов в Python. В результате soup такое же, как если бы POST не было отправлено Это код, который я использовал и работал на другом сайте:

def get_data(final_url): 
    payload = {'session[email]':'myemail@myemail.com','session[password]':'mypwd','session[remember_me]':'0','commit':'Sign in'} 
    with requests.session() as ses: 
     log_soup = BeautifulSoup(ses.get('https://www.login-page.com/login').text) 
     payload['utf8'] = log_soup.findAll('input',attrs={'name':'utf8'})[0].get('value') 
     payload['authenticity_token'] = log_soup.findAll('input',attrs={'name':'authenticity_token'})[0].get('value') 
     ses.post('https://www.login-page.com/login',data=payload) 
     req = ses.get(final_url) 

     soup = BeautifulSoup(req.text) 

    return soup 


<form accept-charset="UTF-8" action="/sign_in" class="main_form" id="new_session" method="post" novalidate="novalidate"><div style="margin:0;padding:0;display:inline"><input name="utf8" type="hidden" value="&#x2713;"/><input name="authenticity_token" type="hidden" value="l5+2s90FtEUsS3GHlr2tAktcxSW8jqgXx3mXEwIlAzE="/></div><div class="error_message"> 
</div> 
<dl> 
<dt><label for="session_email">Email</label></dt> 
<dd> 
<div class="input_border"><input autofocus="autofocus" class="text required email" id="session_email" name="session[email]" placeholder="Email" size="30" type="email"/></div> 
</dd> 
</dl> 
<dl> 
<dt><label for="session_password">Password</label></dt> 
<dd> 
<div class="input_border"><input class="text required" id="session_password" name="session[password]" placeholder="Password" size="30" type="password"/></div> 
</dd> 
</dl> 
<div class="checkbox_field"><input name="session[remember_me]" type="hidden" value="0"/><input id="session_remember_me" name="session[remember_me]" type="checkbox" value="1"/><label for="session_remember_me">Remember me</label></div> 
<table class="buttons"> 
<tr> 
<td><input class="button public" data-disable-with="Please wait..." name="commit" type="submit" value="Sign in"/></td> 
<td class="forgot_password"><a href="/passwords/new">Forgot your password?</a></td> 
</tr> 
</table> 
</form> 

Данные, POST, полученных после ручного входа в систему заключается в следующем:

utf8:✓ 
authenticity_token:l5+2s90FtEUsS3GHlr2tAktcxSW8jqgXx3mXEwIlAzE= 
session[email]:myemail@myemail.com 
session[password]:mypwd 
session[remember_me]:0 

Большое спасибо за помощь!

Answer 1

Какую версию запросов вы используете? Если это что-то между 0.14.x и 1.2.0, вы должны обновиться до 1.2.0. Cookies в сеансе не будут правильно настроены при перенаправлении, а 1.2.0 исправить это.

Другая проблема заключается в том, что вам, вероятно, следует проверить ответ от ses.post(url, data=payload). Вы должны обязательно проверить, что вы получаете код статуса (в данном случае, поскольку вы ожидаете перенаправления), что-то вроде строк 301 или 302.

Предполагая, что все вышесказанное проверено, ваш веб-сайт может быть делать некоторые фанки User-Agent анализ, и вы также можете проверить, что с браузером строки агента пользователя, например,

ses.headers['User-Agent'] = '...' 
response = ses.post(url, data=payload) 
final_response = ses.get(final_url)