个人第一个爬虫程序：利用Python抓取网页上的信息

题外话

我第一次据说Python是在大二的时候，那个时候C语言都没有学好，因而就没有心思学其余的编程语言。如今，个人毕业设计要用到爬虫技术，在网上搜索了一下，Python语言在爬虫技术这方面得到一致好评。

因此从昨天开始就在网上查找各类Python爬虫小程序的源码，但是一天过去了，不只没有写出一个简单的爬虫程序，反而对Python要引入的各类包和语法愈来愈迷糊了。去菜鸟教程一看，Python语言相对来说仍是蛮复杂的（虽然它的语法很简单，可是对于初学者，不少封装在一个包里的东西都很是陌生），我恶补了一下Python的语法，而后又开始在网上搜寻各类教程，总之把别人写的爬虫入门级程序都敲了一遍，但是仍是无一奏效，有各类各样的错误。

但是，今天发现一篇博客，博主很细心的讲了最简单的爬虫有哪些步骤，用到哪些包，包括源码都一句一句进行了分析，因而个人第一个爬虫程序就成功了。下面分享一下这位博主的博客，并写下本身的感觉。

博客地址：Python入门（一）：爬虫基本结构&简单实例。

 

个人实践

下面这张图片就是我按照那位博主的代码，获得的结果。虽然过程当中出了一点语法错误（彻底是我本身的失误），但结果仍是成功的得到了网页上的数据，还进行了筛选，并答应了出来。固然打出来的数据有不少，我只截了一小部分。你们看到的最后一个>>>后面的语句for循环语句块，就是将要进行迭代并打印迭代器的内容，这里就不放图了。

最后的结果就是，全部人的数据都打印出来了。

个人感觉就是：Python能作不少事情，搜索引擎就是很大程度上利用了爬虫程序。