◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。
在python中,我们在使用requests库进行爬虫类和其他请求时,通常需要进行cookie的获取,保存和使用,下面的方法可以将cookie以两种方式存储为txt格式文件
在开始之前,要加载如下几个库文件
import requests import http.cookiejar
在session或者request加入以下代码,以初始化cookie存储
sess = requests.session() sess.cookies = http.cookiejar.MozillaCookieJar(filename='cookie.txt')
在session请求完毕后,加入如下代码,将cookie保存到cookie.txt文件
sess.cookies.save(ignore_discard=True, ignore_expires=True)
在session或者request加入以下代码,以初始化cookie存储
sess = requests.session() sess.cookies = http.cookiejar.LWPCookieJar(filename='cookies.txt')
在session请求完毕后,加入如下代码,将cookie保存到cookie.txt文件
sess.cookies.save(ignore_discard=True, ignore_expires=True)
保存cookie时的两个参数:
ignore_discard:save even cookies set to be discarded.
ignore_expires:save even cookies that have expired.
import requests import http.cookiejar load_cookiejar = http.cookiejar.MozillaCookieJar() load_cookiejar.load('cookies.txt', ignore_discard=True, ignore_expires=True) load_cookies = requests.utils.dict_from_cookiejar(load_cookiejar) cookies = requests.utils.cookiejar_from_dict(load_cookies) session = requests.Session() session.cookies = cookies
import requests import http.cookiejar load_cookiejar = http.cookiejar.LWPCookieJar() load_cookiejar.load('cookies.txt', ignore_discard=True, ignore_expires=True) load_cookies = requests.utils.dict_from_cookiejar(load_cookiejar) cookies = requests.utils.cookiejar_from_dict(load_cookies) session = requests.Session() session.cookies = cookies
◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。