scrapyd的API调用方法难记?一个Python脚本轻松搞定

scrapyd官方文档 http://scrapyd.readthedocs.io/en/stable/overview.html 首先,我们来了解一下什么是scrapyd scrapyd是运行scrapy爬虫的服务程序,它支持以http命令方式发布、删除、启动、停止爬虫程序。而且scrapyd可以同时管理多个爬虫,每个爬虫还可以有多个版本。 为什么要使用scrapyd 1、可以避免爬虫源码被看到
相关文章
相关标签/搜索