当前位置:
首页 > temp > python入门教程 >
-
聊天尬住了?教你用Python一键获取斗图表情包,从此摇身变海王
本次目标
网站:发表情
网不好 ,没加载出来,表弟又在当老六,看不该看的抢我网速!!!
使用的工具
环境:Python3.8、pycharm
需要安装的第三方模块:lxml 、requests
页面分析
- 静态还是动态 get
- 翻页规律
-
在img标签下 获取属性
src属性 data 下载链接
获取title属性值 图片的名字xpath
代码实战
# 导入模块 import requests # 请求模块 from lxml import etree # 解析模块 import urllib.request # 内置模块 import re # 正则 # 文章不理解,我也录制了相应的视频讲解 # 直接在这个君羊:708525271领取就好了,包括完整代码 num = 0 for i in range(1,11): url = f'https://**网址屏蔽了,不然过不了/biaoqing/lists/page/{i}.html' headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/105.0.0.0 Safari/537.36' } # 模拟用户 爬取数据 response = requests.get(url,headers=headers) data = response.text # print(data) # 输出 # 创建对象 html-->xml html = etree.HTML(data) # 找到所有img标签 //在任意节点去匹配 不需要考虑位置 //img[@class="ui image lazy"] img_tag = html.xpath('//img[@class="ui image lazy"]') # print(len(img_tag)) # 一个页面有45个表情包 for img in img_tag: # print() # 下载链接 src = img.xpath('@data-original')[0] # print(src) # 名字 当前的img下面找当前节点 title属性'@title' name = img.xpath('@title')[0] # print(name) title = re.sub('[\ / : * ? " < > |]',"", name) # 替换 urllib.request.urlretrieve(src,f'img/{title}{num}.jpg') # 保存 print(f'{num}张爬取完毕') num+=1 # 等价于num=num+1
采集结果
最后
表情包在手,你就是斗图之王,没什么事情是一个表情包不能解决的,如果有,那就多发一些!
赶紧去试试吧,记得给小编一个三连吧!么么哒!
最新更新
nodejs爬虫
Python正则表达式完全指南
爬取豆瓣Top250图书数据
shp 地图文件批量添加字段
爬虫小试牛刀(爬取学校通知公告)
【python基础】函数-初识函数
【python基础】函数-返回值
HTTP请求:requests模块基础使用必知必会
Python初学者友好丨详解参数传递类型
如何有效管理爬虫流量?
2个场景实例讲解GaussDB(DWS)基表统计信息估
常用的 SQL Server 关键字及其含义
动手分析SQL Server中的事务中使用的锁
openGauss内核分析:SQL by pass & 经典执行
一招教你如何高效批量导入与更新数据
天天写SQL,这些神奇的特性你知道吗?
openGauss内核分析:执行计划生成
[IM002]Navicat ODBC驱动器管理器 未发现数据
初入Sql Server 之 存储过程的简单使用
SQL Server -- 解决存储过程传入参数作为s
关于JS定时器的整理
JS中使用Promise.all控制所有的异步请求都完
js中字符串的方法
import-local执行流程与node模块路径解析流程
检测数据类型的四种方法
js中数组的方法,32种方法
前端操作方法
数据类型
window.localStorage.setItem 和 localStorage.setIte
如何完美解决前端数字计算精度丢失与数