python3简单爬虫实现代码

分享一个python实现的网络爬虫代码。转自：http://www.cnblogs.com/yes123/p/3761388.html 

写了个python3的。代码很是简单就不解释了，直接贴代码。

#test rdp  import urllib.request import re #登陆用的账户信息 data={}
data['fromUrl']='' data['fromUrlTemp']='' data['loginId']='12345' data['password']='12345' user_agent='Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)' #登陆地址 #url='http://192.168.1.111:8080/loginCheck' postdata = urllib.parse.urlencode(data) 
postdata = postdata.encode('utf-8')
headers = { 'User-Agent' : user_agent } #登陆  res = urllib.request.urlopen(url,postdata) #取得页面html
strResult=(res.read().decode('utf-8')) #用正则表达式取出全部A标签 p = re.compile(r'<a href="(.*?)".*?>(.*?)') for m in p.finditer(strResult): print (m.group(1))#group(1)是href里面的内容，group(2)是a标签里的文字

关于cookie、异常等处理看了下，没有花时间去处理，毕竟只是想经过写爬虫来学习python。

您可能感兴趣的文章：

• python 网络爬虫实例代码

• python网络爬虫采集联想词实例

• python博客文章爬虫实现代码

• Python web爬虫的小例子

• python 网络爬虫(经典实用型)

• Python 网易新闻小爬虫的实现代码

• python网络爬虫的代码

• python 实现从百度开始不断搜索的爬虫

• python编写分布式爬虫的思路

• Python实现天气预报采集器（网页爬虫）的教程