下面的源代码是书上的范例,针对python3x如下版本的,而本人是python3.5版本,因此运行中遇到问题以下:
书上源代码:html
#!user/bin/env python # -*- coding:gbk -*- import re import urllib2 import MYSQLdb from BeautifulSoup import BeautifulSoup url1="http://www.doyouhike.net/dest/hongkongtamendao-camping" # 连接能够本身任意找一个 # 赋一个URL fp = urllib2.urlopen(url1) #打开此URL s = fp.read() #把上面操做的结果读取出来赋值给S soup = BeautifulSoup(s) # 用BeautifulSoup分析S polist = soup.finAll('span') # 找到全部tag <span>的内容 print (polist[0].contents[0]) # 打印出第一个tag <span>中间的内容
报错:python
缘由:
1.soup.finAll('span')写错了,应为soup.findAll('span')
2.是print (polist[0].contents[0])不是print (polist[0]/contents[0])
问
题:
1.ImportError: No module named 'MySQLDB'
解决:首先百度,发现python3x版本再也不是使用mysqldb,而是用pymysql,出错缘由多是没安装pymysql
可是
C:UsersAdministrator>pip install pymysql
Requirement already satisfied: pymysql in c:usersadministratorappdatalocalp
rogramspythonpython35libsite-packages
这些命令告诉我,我已经安装过了
因此另外一种可能出在程序代码上,将import mysqldb 改成import pymsql
程序运行成功
【参考】python3的玩家们 pymysql把mysqldb库取代了 - Magicbreaker的专栏 - 博客频道 - CSDN.NET
http://blog.csdn.net/magicbre...
2.ImportError: No module named 'BeautifulSoup'
缘由:
原来Beautifulsoup 4,更名为bs4了
【解决过程】mysql
后来是参考bs4的官网文档:sql
http://www.crummy.com/softwar...
代码以下:
from bs4 import BeautifulSoupapp
soup = BeautifulSoup(open("index.html"))机器学习
soup = BeautifulSoup("<html>data</html>"
【参考】
【已解决】Python3中,已经安装了bs4(Beautifulsoup 4)了,可是却仍是出错:ImportError: No module named BeautifulSoup – 在路上
https://www.crifan.com/python...
3.报错:
“AttributeError: 'module' object has no attribute 'urlopen'”
module 'urllib' has no attribute 'urlopen'等等
缘由是Python3里的urllib模块已经发生改变,此处的urllib都应该改为urllib.request。
【参考】AttributeError: module 'urllib' has no attribute 'urlopen' - u012133509的博客 - 博客频道 - CSDN.NET
http://blog.csdn.net/u0121335...学习
4.问题未解决:
python3 新手一枚,运用Python3.4.1爬网页,网易的机器学习网页,报Unicodedecodeerror,该网页是utf-8._百度知道
https://zhidao.baidu.com/ques... reload(sys)找不到,name 'reload' is not defined - 云淡风轻 - 博客频道 - CSDN.NET
http://blog.csdn.net/x3569826...
正确代码以下(本人python3.5):ui
#!user/bin/env python # -*- coding:gbk -*- # import importlib # importlib.reload(sys) import re import urllib.request,os import pymysql from bs4 import BeautifulSoup url1="http://www.doyouhike.net/dest/hongkongtamendao-camping" # 赋一个URL fp = urllib.request.urlopen(url1) #打开此URL s = fp.read() #把上面操做的结果读取出来赋值给S soup = BeautifulSoup(s) # 用BeautifulSoup分析S polist = soup.findAll('span') # 找到全部tag <span>的内容 print (polist[0].contents[0]) # 打印出第一个tag <span>中间的内容