requests模块高级操作之cookie

时间:2019-10-21 16:10:12   收藏:0   阅读:76

一、cookie

  存储在客户端的键值对,可以让服务端记录客户端相关状态。

  如何处理cookie?

    手动处理: 将抓包工具中的请求头信息中的cookie键值拷贝到header中

    自动处理:session对象

      session对象:该对象和requests有类似的功能,也可以想requests一样调用get/post进行请求发送,                               如果使用seesion进行请求发送的过程中产生了cookie,cookie会被自动存储到session对象中。

 

#爬取雪球网中的新闻标题和内容 https://xueqiu.com/
import requests

#获取seesion对象
session = requests.session()

header={
    User-Agent:Mozilla/5.0 (iPhone; CPU iPhone OS 11_0 like Mac OS X) AppleWebKit/604.1.38 (KHTML, like Gecko) Version/11.0 Mobile/15A372 Safari/604.1
}
#将cookie存储到session中
session.get(url=https://xueqiu.com/,headers=header) #捕获cookie
url = https://xueqiu.com/v4/statuses/public_timeline_by_category.json?since_id=-1&max_id=20353474&count=15&category=-1

data = session.get(url=url,headers=header).json()
print(data)

 

原文:https://www.cnblogs.com/guniang/p/11713463.html

评论(0
© 2014 bubuko.com 版权所有 - 联系我们:wmxa8@hotmail.com
打开技术之扣,分享程序人生!