scrapyd+scrapydweb部署和监控分布式爬虫项目（同一台机器）

一、安装部署scrapyd 系统：centos7.6html 安装命令：python pip3 install scrapyd（由于本地有2.7+和3.+版本python） 安装成功后新建配置文件：web sudo mkdir /etc/scrapydjson sudo vim /etc/scrapyd/scrapyd.confvim scrapyd.conf 写入以下内容：（给内容在https:

>>阅读原文<<