Scrapyd项目部署

一、简介 scrapyd是运行scrapy爬虫的服务程序，它支持以http命令方式发布、删除、启动、停止爬虫程序。而且scrapyd可以同时管理多个爬虫，每个爬虫还可以有多个版本。 特点： 1、可以避免爬虫源码被看到。 2、有版本控制。 3、可以远程启动、停止、删除 二、安装 pip install scrapyd 有个必备的组件库： scrapy 通过pip安装 1.5.0 enum-compa

>>阅读原文<<