[工具&笔记]scrapy相关和docker部分

示例:architecture_spider Scrapy 相关 参考scrapy文档,scrapyd文档 scrapy的架构非常清晰。 scrapy的架构 一般一个非常简单的爬虫,只需要创建一个Spider,定义一个Item,加上部分setting即可。如果对结果存储有要求,那就加一个ItemPipe。 scrapy命令分在项目内和项目外两部分,如何区分是否在项目内,只需要在命令行看输出即可知道
相关文章
相关标签/搜索