python爬虫 爬取百合网的女人们和男人们

学Python也有段时间了,目前学到了Python的类。我的感受Python的类不该称之为类,而应称之为数据类型,只是数据类型而已!只是数据类型而已!只是数据类型而已!重要的事情说三篇。sql

据书上说一个.py(常量、全局变量、函数、数据类型)文件为一个模块,那么就有了一种感受:常量、全局变量、函数、数据类型是同一“级别的”。在此很少说了,收回本身的心思来看爬虫吧!json

一、进百合网官网

单击“搜索”、单击“基本搜索”,这时会跳向另外一个页面,该页面为登陆页面(如图):微信

二、找到login.js,具体步骤:F十二、F五、network、js(如图):

三、找登陆时的异步请求,该请求在login.js中(如图):

四、单击“基本搜索”,会获得两个异步请求

1:获取160个id (如图):
异步

2:根据id获得用户详细信息,为json数据(如图):
函数

说了这么多,该上代码了(总共261行):spa

在此我就分享一下 所须要用到的模块rem

  • requests
  • time
  • pymssql

想获取源码,能够关注微信公众号:源码

相关文章
相关标签/搜索