scrapy源码分析_初始化及settings

研究背景 我在开发scrapy爬虫的时候，想让scrpy启动的时候直接指向一个配置文件, 即，我开启的时候用下面语句，则爬虫服务会加载上mysettings.py中的内容,这个内容可能会写 pipline,mysql路径之类的,方便不一样的环境，也方便不一样的 spider(指单个爬虫任务)mysql scrapy crawl TestMReview -a settingpath=/home/a

>>阅读原文<<