了解爬虫，这一篇就够了！

爬虫基本原理 爬虫的基本原理是基于网站网络协议，根据网址批量获取到网页上的信息操作过程。简单一点说就是用计算机程序来模拟人工点击网页获取数据的过程。 本教程将通过网络协议介绍、http请求流程、网页中的请求与返回、爬虫工作过程来为大家详细介绍爬虫是如何展开工作的。 网络协议 我们经常会在URL的首部会看到http或者https，这个就是访问资源需要的协议类型，爬虫常用的是http和https协议。

>>阅读原文<<