豆瓣电影短评爬虫

豆瓣电影短评爬虫 工具：Pycharm,win10,Python3.6.4 1.需求分析 需要爬取评论者的ID和评论内容，需求十分的简单。 2.爬虫思路 我们要的数据直接就在网页源码中，只需要获取网页源码，用正则匹配出我们要的信息即可。评论一共有5页，我们需要通过循环去构建5条url。最后数据写入txt中。 代码如下： from urllib import request import re f

>>阅读原文<<