一套完整的scrapy爬取微博的新手教材

大家好，我是隔壁小王，上次给大家讲了简单易懂的selenium，完全模拟人的行为来爬取网站的方法，但是巨慢，那这次就说一下爬虫必学的经典：scrapy。 可能你会问，为什么scrapy资料这么多，这么成熟，还要费事去说一下呢？我希望我的帖子是通过一个完整的项目可以让一个新手快速了解掌握这个框架，唯一的要求，就是你会python的基本语法。 ok，废话不多说。所谓代码未动，需求先行：爬取某个微博用户

>>阅读原文<<