scrapy新浪微博爬虫

最近由于作毕设的缘由，须要采集一批数据。本着本身动手的原则，重新浪微博上采集到近百位你们耳熟能详的明星14-18年的微博内容。看看大佬们日常都在微博上都有哪些动态吧～ 1.首先项目采用scrapy编写，省时省力谁用谁知道。 采集的网站为weibo.com，是微博的网页端。稍稍麻烦了一点，但相对于移动段和wap站点来讲内容稍微更全一点。 2.采集以前咱们先来看下微博都给咱们设置了哪些障碍。css 登

>>阅读原文<<