python3爬虫入门（urllib和requests简单使用）

知道python有强大的的爬虫库，但是对于我们普通小白来说，写一个完整的爬虫需要知道什么甚至了解什么都是很重要的。掌握了这些基本点，才能够熟悉爬虫的构成和获取有用的信息。 编写一个小爬虫个人感觉可以分为三个阶段： 1：请求，这个就是使用urlib2或者requests发送http请求。要掌握期中一些用法以及一些常用的请求方式。 2：解析，当得到一个网页的html，我们要用一些工具解析文件，获得我们

>>阅读原文<<