python爬虫最新常见面试题

一.项目问题：python 1.你写爬虫的时候都遇到过什么反爬虫措施，你是怎么解决的redis 2.用的什么框架，为何选择这个框架(我用的是scrapy框架，因此下面的问题也是针对scrapy)mongodb 二.框架问题（scrapy）可能会根据你说的框架问不一样的问题，可是scrapy仍是比较多的数据库 1.scrapy的基本结构（五个部分都是什么，请求发出去的整个流程）编程 2.scrapy

>>阅读原文<<