Scrapy框架编写爬虫

在 tutorial/spiders/ 下创建一个 py 文件 dmoz_spider.py，它是这样定义的： import scrapy from tutorial.items import DmozItem class DmozSpider(scrapy.Spider): name = ‘dmoz’ allowed_domains = [‘dmoz.org’] start_urls = [ “

>>阅读原文<<