scrapy.cmdline.execute

scrapy的cmdline命令python

1.启动爬虫的命令为:scrapy crawl (爬虫名)scrapy

2.还能够经过如下方式来启动爬虫ide

  方法一:建立一个.py文件(这里的爬虫文件名能够本身定义,例:myspider.py)spa

  

#!/usr/bin/env python
# -*- coding:utf-8 -*-
from scrapy import cmdline
# 方式一:注意execute的参数类型为一个列表
cmdline.execute('scrapy crawl spidername'.split())
# 方式二:注意execute的参数类型为一个列表
cmdline.execute(['scrapy', 'crawl', 'spidername'])

  方法二:在终端经过 python myspider.py 也能够执行该文件。code

相关文章
相关标签/搜索