美团爬虫-商铺信息抓取2

咱们接着上一篇继续分析,数据来源确认好了,参数构造分析后,建立scrapy项目git 这里采用手机浏览器中api的构造方式抓取github 接着上一篇讲的,须要细化区域,那么就须要拿到该区域的areaIdjson 在请求中咱们并无看到有额外的XHR负责区域id数据的传输,那么就说明该数据在源码中,咱们经过定位查找,能够发现地区id值是经过js进行选取的api 将areaId以字典areaList的
相关文章
相关标签/搜索