简单了解python爬虫

简单了解python爬虫 1、什么是爬虫 1.1爬虫Spider的概念 爬虫用于爬取数据，又称之为数据采集程序。 爬取的数据来源于网络，网络中的数据能够是由Web服务器(Nginx/Apache)、数据库服务器(MySQL、Redis)、索引库(ElastichSearch) 、大数据(Hbase/Hive)、视频/图片库(FTP)、云存储等(OSS)提供的。 爬取的数据是公开的、非盈利的。 1.

>>阅读原文<<