Scrapy框架之Setting.py的配置详解

#项目名称,默认的USER_AGENT由它来构成,也做为日志记录的日志名 BOT_NAME = 'jianshu_spider' # Scrapy搜索spider的模块列表 默认: [xxx.spiders] SPIDER_MODULES = ['jianshu_spider.spiders'] #使用 genspider 命令建立新spider的模块。默认: 'xxx.spiders' NEW
相关文章
相关标签/搜索