Python requests库模拟浏览器行为的一些技巧记录

一些经验记录。

忽略ssl报错

一些证书校验问题会导致程序报错，解决方法为在发送请求的时候，带上verify=False参数；

result = requests.get(burp0_url, headers=burp0_headers, verify=False)

---

为requests设置代理

这个功能其实很实用，有时想用requests模拟浏览器发包，但是结果和浏览器不一样时，那么可以通过设置代理的方式，拦截requests的发包和浏览器的发包，通过对比，你就能知道你和浏览器的发包有什么差别，根据差异来对程序做改进。

攻击者、爬虫常用。

proxies = {'http': 'http://localhost:8080', 'https': 'http://localhost:8080'}
result = requests.get(burp0_url, headers=burp0_headers, proxies=proxies, verify=False)

---

遇到响应为302跳转

requests遇到响应吗为302的时候，它默认都是跳转的（allow_redirects的默认值是True），但是cookie不会像浏览器一样保存，这样就会导致跳转到第二个页面的会出错（因为缺少cookie），可以加上allow_redirects=False参数，这样就不会作重定向跳转。

requests.get(burp0_url, headers=burp0_headers, cookies=cookie1, allow_redirects=False)