将scrapy-redis分布式爬虫使用Scrapyd部署项目

部署前提是自己的爬虫项目已经写完整。 如果使用的是pycharm工具,可直接在Terminal里安装需要的包。(anaconda3环境) 输入命令pip install scrapy scrapyd scrapyd-client spiderkeeper 以上,安装完所有需要的包。 输入scrapy启动scrapy服务 启动成功。 浏览器输入 127.0.0.1:6800 在script文件夹中找
相关文章
相关标签/搜索