几句话让你明白什么是爬虫-Scrapy

Python         Scrapy是Python中为了爬去网页数据而提供的框架，主要应用于:数据挖掘，信息处理或存储历史数据等一系列的程序中。       那么我们爬数据的的本质是什么呢？就是利用Http、Https协议将开放性的web内容下载到本地中。       当然既然有爬虫就会有所谓的反爬，反反爬，反反爬。。。 各种防范措施，但是程序员是不会放弃的。       一般防止被爬的人会

>>阅读原文<<