Python爬虫：一些常用的爬虫技巧总结

用python也差不多一年多了，python应用最多的场景还是web快速开发、爬虫、自动化运维：写过简单网站、写过自动发帖脚本、写过收发邮件脚本、写过简单验证码识别脚本。   爬虫在开发过程中也有很多复用的过程，这里总结一下，以后也能省些事情。   基本抓取网页   get方法   1 2 3 4 import urllib2 url  "http://www.baidu.com" respons

>>阅读原文<<