数据采集:多线程+动态IP处理并发爬虫

爬取目标为豆瓣电影列表 https://movie.douban.com/tag/#/?sort=U&range=0,10&tags=电影python 对于每一部电影,分别爬取其中的①电影名称,②导演,③上映日期,④制片国家/地区,⑤片长,⑥评分,⑦类别,⑧评论人数 对于电影的详情页面,豆瓣是使用了静态加载,全部直接使用requests请求库+正则表达式抓取便可。web import reques
相关文章
相关标签/搜索