scrapy学习笔记（杂1）

Scrapy 流程： 模块功能：         处理大型爬虫中来自不同的网站的数据： 首先定义不同的爬虫Spider1，spider2，spider3…不同爬虫中具有自身属性 class TestSpider(scrapy.Spider):     name = 'test'     allowed_domains = ['test.com']     start_urls = ['http:/

>>阅读原文<<