【爬虫】抓取京东商品列表具体商品的各类评论数量-2019年6月可用

原本只是想简单地抓个好评数，在一开始的搜索结果页面上php 而后发现抓不到，用lxml里面etree解析的是空的html 问题就变烦了，问了一下前同事，告诉我说是异步渲染的python 在这里找到了全部有关评论的请求：json 请求获得的是json格式数据：数组 url明显是商品id拼起来的，因此就要先获取整个页面上全部的商品idapp pids = html1.xpath('//li[cont

>>阅读原文<<