Scrapyd监控系统之SpiderKeeper和Scrapydweb详解

♚ zarten,互联网一线工做者。css 博客地址:zhihu.com/people/zartennode 概述nginx 咱们的scrapy爬虫项目能够部署在scrapyd服务器中,能够经过scrapyd提供的接口访问web主页,但这个页面比较简陋且一台scrapyd服务器提供一个主页,若多台的话,就要访问多个主页,这样会比较麻烦。git 有没有开源的库能够统一管理,实现一键部署,定时任务等功
相关文章
相关标签/搜索