Web-Crawler（爬虫基础）

爬虫基础 一. 什么是爬虫 网络爬虫（又被称为网络蜘蛛，网络机器人）就是模拟浏览器发送网络请求，接收请求响应，一种按照一定的规则，自动的抓取互联网信息的程序，原则上，只要是浏览器（客户端）能做的事情，爬虫都能做。 二. 怎样获取到爬虫 下载其他公司开发的通用的爬虫（八爪鱼） 开发人员自己编写 三. 开发语言 其实只要能够发送HTTP（s）请求的任何编程语言都是可以做爬虫的，像C语言、C++、jav

>>阅读原文<<