当前位置:
首页 > Python基础教程 >
-
Python之Requests模块使用详解(4)
五、关于Cookies
如果一个响应包含cookies的话,我们可以使用下面方法来得到它们:
1
2
3
4
|
>>> url = 'http://www.pythontab.com' >>> r = requests.get(url) >>> r.cookies[ 'example_cookie_name' ] 'example_cookie_value' |
我们也可以发送自己的cookie(使用cookies关键字参数):
1
2
3
|
>>> url = 'http://pythontab.com/cookies' >>> cookies={ 'cookies_are' : 'working' } >>> r = requests.get(url, cookies=cookies) |
六、关于重定向
有时候我们在请求url时,服务器会自动把我们的请求重定向,比如github会把我们的http请求重定向为https请求。我们可以使用r.history来查看重定向:
1
2
3
4
5
|
>>> r = requests.get( 'http://pythontab.com/' ) >>> r.url 'http://pythontab.com/' >>> r. history [] |
从上面的例子中可以看到,我们使用http协议访问,结果在r.url中,打印的却是https协议。那如果我非要服务器使用http协议,也就是禁止服务器自动重定向,该怎么办呢?使用allow_redirects 参数:
1
|
r = requests.get( 'http://pythontab.com' , allow_redirects=False) |
七、关于请求时间
我们可以使用timeout参数来设定url的请求超时时间(时间单位为秒):
1
|
requests.get( 'http://pythontab.com' , timeout=1) |
八、关于代理
我们也可以在程序中指定代理来进行http或https访问(使用proxies关键字参数),如下:
1
2
3
4
5
|
proxies = { "http" : "http://10.10.1.10:3128" , "https" : "http://10.10.1.10:1080" , } requests.get( "http://pythontab.com" , proxies=proxies) |
九、关于session
我们有时候会有这样的情况,我们需要登录某个网站,然后才能请求相关url,这时就可以用到session了,我们可以先使用网站的登录api进行登录,然后得到session,最后就可以用这个session来请求其他url了:
1
2
3
4
5
|
s=requests.Session() login_data={ 'form_email' : 'youremail@example.com' , 'form_password' : 'yourpassword' } s.post( "http://pythontab.com/testLogin" ,login_data) r = s.get( 'http://pythontab.com/notification/' ) print r.text |
栏目列表
最新更新
nodejs爬虫
Python正则表达式完全指南
爬取豆瓣Top250图书数据
shp 地图文件批量添加字段
爬虫小试牛刀(爬取学校通知公告)
【python基础】函数-初识函数
【python基础】函数-返回值
HTTP请求:requests模块基础使用必知必会
Python初学者友好丨详解参数传递类型
如何有效管理爬虫流量?
SQL SERVER中递归
2个场景实例讲解GaussDB(DWS)基表统计信息估
常用的 SQL Server 关键字及其含义
动手分析SQL Server中的事务中使用的锁
openGauss内核分析:SQL by pass & 经典执行
一招教你如何高效批量导入与更新数据
天天写SQL,这些神奇的特性你知道吗?
openGauss内核分析:执行计划生成
[IM002]Navicat ODBC驱动器管理器 未发现数据
初入Sql Server 之 存储过程的简单使用
这是目前我见过最好的跨域解决方案!
减少回流与重绘
减少回流与重绘
如何使用KrpanoToolJS在浏览器切图
performance.now() 与 Date.now() 对比
一款纯 JS 实现的轻量化图片编辑器
关于开发 VS Code 插件遇到的 workbench.scm.
前端设计模式——观察者模式
前端设计模式——中介者模式
创建型-原型模式