爬虫原理

       前几天，有朋友问我爬虫程序怎么实现的，今天，我给大家讲讲爬虫，讲的不好，请大家多提提宝贵的意见。今天，我主要从三部分开始讲，网络连接，爬虫原理，网页构造。 网络连接        像是在地铁里的自助饮料售货机上购买饮料一样：购买者只需选择所需饮料，投入硬币（或纸币），自助饮料售货机就会弹出相应的商品。网络连接也正是如此，如下图所示，本机电脑（购买者）带着请求头和消息体（硬币和所需饮料

>>阅读原文<<