使用请求模块,如何在请求响应中处理'set-cookie'？

Question

我正在尝试打开登录页面(GET),获取网络服务器提供的cookie,然后提交用户名和密码对以登录网站(POST).

看看这个Stackoverflow问题/答案,我认为我会做以下事情:

import requests
import cookielib


URL1 = 'login prompt page'
URL2 = 'login submission URL'
jar = cookielib.CookieJar()

r = requests.get(URL1, cookies=jar)
r2 = requests.post(URL2, cookies=jar, data="username and password data payload")

但是,在标题中r有一个set-cookie,但在jar对象中没有变化.事实上,jar正如链接问题的回答所表明的那样,没有任何内容被填充.

我在我的代码中通过使用头文件dict并在执行GET或POST之后解决这个问题,使用它来处理set-cookie标头:

headers['Cookie'] = r.headers['set-cookie']

然后在请求方法中传递标头.这是正确的,还是有更好的方法来应用set-cookie？

Answer 1

忽略cookie-jar,让requests你处理cookie.使用会话对象,它会持久化cookie并将它们发送回服务器:

with requests.Session() as s:
    r = s.get(URL1)
    r = s.post(URL2, data="username and password data payload")

Answer 2

有一个名为a的包含类session,它会自动为您处理这类事情.您可以创建它的实例,然后在该实例上调用get和set右键.

import requests

URL1 = 'login prompt page'
URL2 = 'login submission URL'

session = requests.Session()

r = session.get(URL1)
r2 = session.post(URL2, data="username and password data payload")

Answer 3

对我有用的另一种方法（不使用会话对象）如下（在 中测试v2.18.4）。

jar = requests.cookies.RequestsCookieJar()
response1 = requests.get(some_url, cookies=jar) # or post ...
jar.update(response1.cookies)
response2 = requests.get(some_other_url, cookies=jar) # or post ...

请注意，如果存在由Requests库透明处理的重定向，上述代码将会失败。在这种情况下，您还必须使用重定向响应中发送的 cookie 更新您的 jar。例如，通过执行以下操作：

if (response.history): # we have to add to the cookie jar, the cookies sent by the server in intermediate responses 
    for historicResponse in response.history:
        jar.update(historicResponse.cookies)