scrapyd部署(远程管理爬虫项目)

1. 需要安装scrapyd=1.2.0     scrapyd-client=1.2.0a1 首先进入虚拟环境   2. 启动scrapyd服务 3.  配置爬虫项目:  4.开始向scrapyd中部署  查看当前可用于部署到scrapyd 服务中的爬虫有哪些 参数1:[deploy:jobbole] 参数2:scrapy.cfg文件中的url  命令scrapy list 用来查看当前项目中可
相关文章
相关标签/搜索