爬取今日头条当心（新）得

最近在学习爬取头条，废话很少说直接简单回顾一下，我想爬取每一个搜索页面中的图片连接，而且保存起来，但由于整个网页源码是被js渲染过的，因此没法直接从网页中爬取结果页面连接 如上图所示，爬取的结果不是咱们想要的，想要的是axjs请求后被渲染的网页代码。 随便搜索一个关键词后，通过查找发现渲染的文件在xhr的json文件中，如图： 因而可知每一个结果页面的连接都在dada:[0:{***,***,ar

>>阅读原文<<