发布于 2017-10-30 13:04:45 | 131 次阅读 | 评论: 0 | 来源: 网友投递
Python编程语言
Python 是一种面向对象、解释型计算机程序设计语言，由Guido van Rossum于1989年底发明，第一个公开发行版发行于1991年。Python语法简洁而清晰，具有丰富和强大的类库。它常被昵称为胶水语言，它能够把用其他语言制作的各种模块（尤其是C/C++）很轻松地联结在一起。
哎，好久没有学习爬虫了，现在想要重新拾起来。发现之前学习爬虫有些粗糙，竟然连requests中添加cookies都没有掌握，惭愧。废话不宜多，直接上内容。
我们平时使用requests获取网络内容很简单，几行代码搞定了，例如：
import requests
res=requests.get("https://cloud.flyme.cn/browser/index.jsp")
print res.content你没有看错，真的只有三行代码。但是简单归简单，问题还是不少的。
首先，这里的请求只是get方法，并且没有解决cookies的问题。
然后就是这里并没有解决乱码的问题。（乱码是python中的变态点）其实，在requests的get方法中添加cookies的方法不难 可以这样子：
res=requests.get("https://cloud.flyme.cn/browser/index.jsp",cookies=cookies) 我们所面临的问题是，如何构造这里的cookies。
这里的cookies是一个字典格式的数据。
平时我们浏览网页的时候，在审查元素中可以查看到所访问网页的cookies内容，大都是这样子的：
sn_openNetBySms=%23810EBMA3TE53; sn_map=810EBMA3TE53; DSESSIONID=f1987887-3d1d-4a85-ad75-c6270e588290; JSESSIONID=; _uid=; _keyLogin=; _rmtk=; _uticket=ns_0393027c2f9f686e3499e8ebb8d1d622; _ckk=ns_397a592791064029bf1336eff1cf516e; ucuid=8a135520affa423584307f6e2c210f02; _domain=cloud.flyme.cn; _islogin=true; lang=zh_CN; JSESSIONID=1gmfzynp0ns6s1u6a92xkqgi6q 天那，这是人看的吗？不是。这是经过加密处理后的数据。同样，我们可以将加密后的数据传递到get方法的cookies参数中，服务器会自动将加密后的数据进行解密，再检查数据的正确性。
至于，如何查看所访问网页的cookies内容，可以使用浏览器的审查功能，F12或者右击审查（Chrome）打开。在network中查看链接的Headers内容。另外，也可以使用软件抓包查看，如Fiddler web Debugger。
这里假设获取到了cookies的内容，我们可以保存到本地TXT文件中（直接把cookies的内容粘贴进去即可），例如test.txt文件。
然后，
f=open(r'test.txt','r')#打开所保存的cookies内容文件
cookies={}#初始化cookies字典变量
for line in f.read().split(';'): #按照字符：进行划分读取
#其设置为1就会把字符串拆分成2份
name,value=line.strip().split('=',1)
cookies[name]=value #为字典cookies添加内容 这时候我们将cookies添加到get方法中：
res=requests.get("https://cloud.flyme.cn/browser/index.jsp",cookies=cookies) 这时候获取到的res.content中就是我们将cookies信息添加到get中后访问网页所获取的内容。
总结
以上就是本文关于python编程之requests在网络请求中添加cookies参数方法详解的全部内容，希望对大家有所帮助。感兴趣的朋友可以继续参阅本站：python正则表达式re之compile函数解析、Python_LDA实现方法详解、Python探索之修改Python搜索路径等，如有不足之处，欢迎留言讨论。感谢朋友们对本站的支持！