python制做天气数据api

偶然工做中用到了天气情况数据，后来就不须要了，但仍是想作一个天气的，由于想给本身的女票作个天气短信提醒。说搞就搞，第一想法就是apistore，上去了以后，好贵。。。，百度一了一下，全都很差用，决定本身写一个，本身动手丰衣足食嘛。再百度天气，中国天气网是第一条，仍是官方的，说明应该不错，点进去以后，看了数据，需求基本知足了，那么，走起。

百度搜索引擎（本人声明，不是百度员工）

第一步：查询数据源。google打开天气网，搜了下北京天气，alt+cmd+i打开调试模式（mac快快捷键），network查看数据来源。通过分析，基本能够肯定数据主要来源于2个接口：http://d1.weather.com.cn/dingzhi/101010100.html?_=1537709265753（地之一）和http://d1.weather.com.cn/sk_2d/101010100.html?_=1537709265752（地址二），多打开了几个别的城市进行查看，最后结论：101010100参数一城市的id值，1537709265753参数二时间戳（毫秒级）。

调试&&分析

 

第二步：获取城市id。在官网反反复复尝试获取城市的数据，发个城市id有几个规律：

1. 城市id由9位数字组成(可能你们以为感受有点废话了，别急日后看)，例如：北京101010100；
2. 城市id的第三位，第四位是表示省份（免费普及一下：中国34个省级行政区域，包括23个省，5个自治区，4个直辖市，2个特别行政区），01-北京，02-上海，03-天津，04-重庆。。。34-台湾；
3. 后三位尾数，针对于直辖市，尾数从000开始计数，非直辖市尾数从001开始计数；
4. 天气网数据细到乡镇，街道。乡镇的id：101080503(cityid) + xxx(数字，001开始)，12位组成；街道数据过于细致，不必获取，并且本人能力有限，只初始化了到城市级别的的数据。
5. 额外赠送：中国每一个省份的城市最大值位21，代码中会用到

知道规律，也了解了request url，response，就能够搞定城市id的数据源了。解决方法以下：

语言：python

思想：依据id的范围生成范围id，requests去get请求，获取结果

要点：

• 省份的标志位01～04位直辖市，05～34非直辖市，城市的标志位01～23便可
• header必须含有Referer值，应该用来作一个访问标识
• response返回值类型是string，可是weatherinfo的信息为json，需转化

很少说，直接上代码：

城市id值生成

第三步：数据入库。数据库决定直接用sqlite，主要考虑到数据库的可移植性，git项目直接运行就能够，不用额外配置数据库，并且单张表，数据量不会很大，性能没有过高要求。python + requests + sqlalchemy + db，玩py的不知道sqlalchemy&&requests，本身赶快恶补一下吧。。。废话也很少说，git项目看db.py文件，建立表以及数据库见下图：

数据库建立&&表查询

城市id获取的整理流程设计ok，执行python citys.py就能够见证奇迹。不过，这个奇迹有点慢而已，个人本大概执行了30个小时左右，后来想的是python配合多进程（GIL机制，不要使用多线程）来提速，搞了个pool在那，不过我把多进程注释了，有兴趣的人能够去试下多进程。

第四步：api接口服务。作web服务，flask是不错的选择，简单易用，性能也不差。用blueprint作了个weather的接口，可是信息由地址一与地址二组成，地址一主要用来获取最高/最低温度，地址二获取实时的天气相关信息，请求的地址参数均由第三步回去的城市id以及时间戳。

requests基础：http://docs.python-requests.org/zh_CN/latest/user/quickstart.html

请求的时候，我把浏览器正常访问的header都记录，请求成功，把结果封装json返回。在controller那，我对请求方式，请求参数作了限制，增强接口的严谨性。详细本身看代码，post请求的参数那块，args，form，json，get_json分不清的，请自行百度，我作了个小技巧：

获取post请求参数

第五步：测试。这里介绍2种测试方式，postman + curl。

curl：curl -X POST http://127.0.0.1:8888/weather/ -H 'Content-Type: application/json' -d '{"city": "昌平"}' | python -m json.tool

postman：图形化界面。。。本身点把

没有curl命令的，本身搞下，作开发的话，不知道curl，会很low的，看下结果，完美：

成果，给本身点个赞

 

总结：代码很简单，不过在获取数据源id上花费了一些时间，后来一想，城市id的表有个问题，表有：id，cityname，cityid 3个字段，没有记录省份，查询同名的城市可能会有问题，后续在改吧。。。就先到这里了，我是程序猿，python程序猿。

二期功能：定时任务 + 短信提醒 + 邮件报警

项目git地址：https://github.com/GIS90/weathers