python 爬取网易新闻评论

前段时间在看处理数据相关的书籍,实践中需要一些网上评论的文本数据集,所以想到爬取网易新闻底下的评论。本来想着Python+beautifulsoup(解析)+requests(抓取),最后存储在txt文件中就OK,废话不多说,试试吧~ 以这条新闻为例,可以看到,网易的新闻页面和评论页面是分开的,我们点进评论页面 我们看到一如既往的“支持加油”,还有评论页面的****url:http://comme
相关文章
相关标签/搜索