VB.net 2010 视频教程 VB.net 2010 视频教程 python基础视频教程
SQL Server 2008 视频教程 c#入门经典教程 Visual Basic从门到精通视频教程
当前位置:
首页 > temp > python入门教程 >

  • 快过年了，Python实现12306查票以及自动购票....

准备工作

环境

  • Python 3.8
  • Pycharm

插件

谷歌浏览器驱动

模块

需要安装的第三方模块，直接pip安装即可。

requests   # 数据请求模块
prettytable # 打印好看一些
selenium  # 模拟人的行为去操作浏览器

 

文件素材

city.json文件

# 下图素材、视频、代码、插件安装教程我都准备好了，直接在这个q君羊708525271自取就好了

 

一点小TIPS

12306 每天只能退票三次

查票
购票

建议谷歌或者火狐…

爬虫思路

分析数据来源

车票信息：来源哪个数据包 <车票信息请求那个网站url地址可以得到>

开发者工具：F12

代码实现步骤

1、发送请求, 对于刚刚分析得到url地址发送请求。
2、获取数据, 获取服务器返回响应数据, response
3、解析数据, 提取我们想要车次信息。

复制代码
# 导入数据请求模块
import requests
# 导入格式化打印
import prettytable as pt
# 导入json
import json
# 导入自动化测试模块
from selenium import webdriver
# 导入账号密码
from password import account, Password
# 导入时间模块
import time
# 导入键盘控制
from selenium.webdriver.common.keys import Keys
复制代码

 

打开浏览器。

driver = webdriver.Chrome()

 

绕过检测机制

driver.execute_cdp_cmd("Page.addScriptToEvaluateOnNewDocument",
                       {"source": """Object.defineProperty(navigator, 'webdriver', {get: () => undefined})"""})

 

输入网址

driver.get('https://kyfw.12306.cn/otn/resources/login.html')

 

输入账号密码

先找到账号密码输入框, 再进行输入操作。

复制代码
try:
    # 输入账号
    driver.find_element_by_css_selector('#J-userName').send_keys(account)
    # 输入密码
    driver.find_element_by_css_selector('#J-password').send_keys(Password)
    # 点击登陆
    driver.find_element_by_css_selector('#J-login').click()
    # 延时
    driver.implicitly_wait(10)
    time.sleep(1)
复制代码

 

点击弹窗

driver.implicitly_wait(10)  # 延时等待 为了让网页元素加载
time.sleep(1)
driver.find_element_by_css_selector('.btn').click()

 

点击车票预定

driver.find_element_by_css_selector('#link_for_ticket').click()

 

选择城市以及时间, 点击查询

复制代码
driver.find_element_by_css_selector('#fromStationText').click() # 点击输入框
driver.find_element_by_css_selector('#fromStationText').clear() # 清空输入框
driver.find_element_by_css_selector('#fromStationText').send_keys('长沙') # 输入内容
driver.find_element_by_css_selector('#fromStationText').send_keys(Keys.ENTER) # 回车按钮
# 输入到达的城市
driver.find_element_by_css_selector('#toStationText').click() # 点击输入框
driver.find_element_by_css_selector('#toStationText').clear() # 清空输入框
driver.find_element_by_css_selector('#toStationText').send_keys('上海') # 输入内容
driver.find_element_by_css_selector('#toStationText').send_keys(Keys.ENTER) # 回车按钮
# 输入时间
driver.find_element_by_css_selector('#train_date').click() # 点击输入框
driver.find_element_by_css_selector('#train_date').clear() # 清空输入框
driver.find_element_by_css_selector('#train_date').send_keys('2022-11-09') # 输入内容
# 点击查询按钮
driver.find_element_by_css_selector('#query_ticket').click()
# 点击预定
driver.find_element_by_css_selector('#queryLeftTable tr:nth-child(1) .btn72').click()
# 选择乘车人
driver.find_element_by_css_selector('#normalPassenger_1').click()
# 点击提交提单
driver.find_element_by_css_selector('#submitOrder_id').click()
# 选择座位
# driver.find_element_by_css_selector('#erdeng1 > ul:nth-child(4) > li:nth-child(2)').click()
# 点击提交
time.sleep(3)
driver.find_element_by_css_selector('#qr_submit_id').click()
driver.find_element_by_css_selector('#qr_submit_id').click()
复制代码

 

发送请求, 模拟浏览器对url地址发送请求

复制代码
# 读取文件 城市字母文件
f = open('city.json', encoding='utf-8')
# f.read() 返回字符串数据类型 把字符串转成json字典数据 --> 根据键值对取值
json_data = json.loads(f.read())
# 输入内容
from_city = input('请输入你要出发城市: ')
to_city = input('请输入你要到达城市: ')
date = '2022-11-09'
# 确定请求链接
url = f'https://kyfw.12306.cn/otn/leftTicket/query?leftTicketDTO.train_date={date}&leftTicketDTO.from_station={json_data[from_city]}&leftTicketDTO.to_station={json_data[to_city]}&purpose_codes=ADULT'
# 模拟伪装 ---> headers 请求头
headers = {
    # Cookie 用户信息, 表示常用于检测是否有登陆账号
    'Cookie': '_uab_collina=165650330916153394558455; JSESSIONID=34AFEC7D7370756179A2976A79434D6A; _jc_save_wfdc_flag=dc; _jc_save_fromStation=%u957F%u6C99%2CCSQ; BIGipServerotn=1911030026.24610.0000; BIGipServerpassport=770179338.50215.0000; guidesStatus=off; highContrastMode=defaltMode; cursorStatus=off; RAIL_EXPIRATION=1668129535127; RAIL_DEVICEID=TbHG0I9N4zNOVXocTOo6JdSREGznbbsYb5f_xQPshKLa1Y8Qx7LbGMu_h4Zwb6MyBOk_1zvlhZn85dlBcC4F1SEL1hwpTWuAkNkA7dSIqQ-dgdZAcoL1jMCS4bWfKSgKEstpGs8BAzfO-ItsTfKkP6YQL9Y24vGA; fo=uyys4j4q4rs7diywCDbOKBwdzYaDJcHjbyEG0hwDDZbF9Swz2dB79o6CCDC_EOHwJ7XidDtuZKQKjz6vYdfE3PDpSX9YvVulaMDDQmKGRPhrjzRZHlNGKC2S6egp70_4PJGqyv770aRXnJgffGRwkABzbJZDDiUtaTyHzatcoZpt_YO-T-dfbdjNQrQ; route=9036359bb8a8a461c164a04f8f50b252; _jc_save_toStation=%u4E0A%u6D77%2CSHH; _jc_save_fromDate=2022-11-09; _jc_save_toDate=2022-11-07',
    # User-Agent 用户代理 表示浏览器基本身份信息
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/101.0.0.0 Safari/537.36'
}
# 发送请求
response = requests.get(url=url, headers=headers)
# <Response [200]> 表示请求成功了
print(response)
复制代码

 

获取数据，获取服务器返回响应数据。

为什么获取response.json() 数据的时候报错?
simplejson.errors.JSONDecodeError: Expecting value: line 1 column 4 (char 3)
一定获取的数据, 不是完整json数据格式

解决方法:

  1. 获取response.text 看数据返回情况
    发现自己获取的数据, 和开发者工具里面所看到不一样 <因为你被反爬了 [要么得不到数据, 要么得到数据不是想要的]>
  2. 因为没有伪装, 加headers 伪装一下

解析数据, 提取我们想要车次信息

response.json()  # 获取响应json字典数据  完整的花括号
response.text  # 获取响应文本数据 字符串数据

 

根据基础语法知识点: 字典取值 --> 键值对取值, 根据冒号左边的内容[键], 提取冒号有右边的内容[值]

复制代码
# 实例化一个对象
tb = pt.PrettyTable()
# 输出添加字段名
tb.field_names = [
    '序号',
    '车次',
    '出发时间',
    '到达时间',
    '耗时',
    '特等座',
    '一等',
    '二等',
    '软卧',
    '硬卧',
    '硬座',
    '无座',
]
# 添加序号 每次循环+1
page = 0
# for循环遍历, 把列表里面元素 一个一个提出来
for i in response.json()['data']['result']:
    # 先用 split 分割, 再用列表取值: 根据索引位置
    index = i.split('|')
    num = index[3]  # 车次
    start_time = index[8]  # 出发时间
    end_time = index[9]  # 到达时间
    use_time = index[10]  # 耗时
    topGrade = index[32]  # 特等座
    first_class = index[31]  # 一等
    second_class = index[30]  # 二等
    hard_sleeper = index[28]  # 硬卧
    hard_seat = index[29]  # 硬座
    no_seat = index[26]  # 无座
    soft_sleeper = index[23]  # 软卧
    dit = {
        '序号': page,
        '车次': num,
        '出发时间': start_time,
        '到达时间': end_time,
        '耗时': use_time,
        '特等座': topGrade,
        '一等': first_class,
        '二等': second_class,
        '软卧': soft_sleeper,
        '硬卧': hard_sleeper,
        '硬座': hard_seat,
        '无座': no_seat,
    }
    # print(dit)
    # 添加每行输出内容
    tb.add_row([page, num, start_time, end_time,
                use_time,
                topGrade,
                first_class,
                second_class,
                soft_sleeper,
                hard_sleeper,
                hard_seat,
                no_seat,
                ])
    page += 1 # 每次循环+1
复制代码

 

今天的分享就到这里结束了，觉得有用的话，记得点餐收藏呀！

出处：https://www.cnblogs.com/hahaa/p/17033277.html

 



相关教程