最低折扣机票查询
前言
对于平时出行大多数人都是选择坐高铁,当然了如果这是对于距离比较近的行程是最划算的,如果对于路途长远的人言,提前购买飞机票价格可能比高铁票更加的便宜,如果我们可以爬取机票数据并分析它什么时候折扣最低,这样是不是出行更方便,更划算呢?
基本环境配置
版本:Python3
相关模块:
打开携程网,查询机票,如广州到成都。
CAN 表示广州,CTU 表示成都,日期 “2018-06-15”就比较明显了。一般的爬虫,只有替换这几个值,就可以遍历了。但观察发现,有链接可以看到当前网页的所有json格式的数据。
同样可以看到城市和日期,该连接打开的是 json 文件,里面存储的就是当前页面的数据。显示如下,其中 "fis" 则是航班信息。
每一次爬取只要替换城市代码和日期即可,城市代码自己手动整理了一份:
为了防止频繁请求出现 429,useragent 也找多一些让其随机取值。但是有时候太频繁则需要输入验证码,所以还是每爬取一个出发城市,暂停10秒钟吧。
先创建表用于存储数据,此处用的是 sql Server:
因为是爬取所有城市,所以城市不限制,只限制日期,即爬取哪天至哪天的数据。全部脚本如下:
总结
以上所述是小编给大家介绍的Python 爬取携程所有机票,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对小编的支持。
相关阅读
转的一篇,整理的很全了,转需及自用 原文:https://blog.csdn.net/weixin_42209553/article/details/84074840 正文: 格式:库,名称,简介 C
add_axes新增子区域 add_axes为新增子区域,该区域可以座落在figure内任意位置,且该区域可任意设置大小可以用来做一些子图,图中图考
很多用户在飞猪APP购买飞机票的时候,常常会有一个疑问,就是在飞猪购买飞机票会返利吗?对于这个问题,很多用户不是特别清楚,下面小编就
在做数据抓取的时候,经常遇到由于网络问题导致的程序保存,先前只是记录了错误内容,并对错误内容进行后期处理。 原先的流程: def cr