python利用selenium+requests+beautifulsoup爬取12306火车票信息

 

在高速发展的时代。乘车出远门是必不可少的,有些查询信息是要收费的。这里打造免费获取火车票信息python

想要爬取12306火车票信息,访问12306官方网站,输入出发地,目的地  ,时间  以后点击肯定,这是咱们打开谷歌浏览器开发者模式找到   https://kyfw.12306.cn/otn/resources/js/framework/station_name.js    这里包含了全部城市的信息和全部城市的缩写字母。想要获取火车票信息  https://kyfw.12306.cn/otn/leftTicket/queryZ?leftTicketDTO.train_date=2019-01-19&leftTicketDTO.from_station=BJP&leftTicketDTO.to_station=SHH&purpose_codes=ADULT   ,这是北京到上海   浏览器肯定以后所抓的包   从中能够  看出  BJP =北京   而  SHH=上海     .   下图为 全部城市代号json

如今把上面的js 数据转变为json数据     {“北京”:BJP  ,"上海":SSH}数组

根据字符窜的  split ()方法    按照“=”进行拆分  取出等号后面的数据           “字符窜”.split("=")[1]      这样就获取到  等号后面的数据  以下图:浏览器

得到数据以后而后在根据 "|"  进行拆分  并去除  “@”获得以下函数

根据相邻俩个组成json数据,遍历数组   分为俩个数组  一个为  实体  一个为简写  而后再根据python强大的   函数    dict(zip(数组1,数组2))  将其变为  json键值对以后将数据  网站

https://kyfw.12306.cn/otn/leftTicket/queryZ?leftTicketDTO.train_date=2019-01-19&leftTicketDTO.from_station=BJP&leftTicketDTO.to_station=SHH&purpose_codes=ADULT  抓包得到是网址  以后利用selenium 进行定位  beautifulsoup解析数据  获取要的值而后进行  保存   3d

如下是完整代码截图   仅供参考code

相关文章
相关标签/搜索