scrapy实例:爬取天气、气温等

1.创建项目 scrapy startproject weather # weather是项目名称   scrapy crawl spidername开始运行，程序自动使用start_urls构造Request并发送请求，然后调用parse函数对其进行解析， 在这个解析过程中使用rules中的规则从html（或xml）文本中提取匹配的链接，通过这个链接再次生成Request，如此不断循环，直到返回

>>阅读原文<<