下面的源代碼是書上的範例,針對python3x如下版本的,而本人是python3.5版本,因此運行中遇到問題以下:
書上源代碼:html
#!user/bin/env python # -*- coding:gbk -*- import re import urllib2 import MYSQLdb from BeautifulSoup import BeautifulSoup url1="http://www.doyouhike.net/dest/hongkongtamendao-camping" # 連接能夠本身任意找一個 # 賦一個URL fp = urllib2.urlopen(url1) #打開此URL s = fp.read() #把上面操做的結果讀取出來賦值給S soup = BeautifulSoup(s) # 用BeautifulSoup分析S polist = soup.finAll('span') # 找到全部tag <span>的內容 print (polist[0].contents[0]) # 打印出第一個tag <span>中間的內容
報錯:python
緣由:
1.soup.finAll('span')寫錯了,應爲soup.findAll('span')
2.是print (polist[0].contents[0])不是print (polist[0]/contents[0])
問
題:
1.ImportError: No module named 'MySQLDB'
解決:首先百度,發現python3x版本再也不是使用mysqldb,而是用pymysql,出錯緣由多是沒安裝pymysql
可是
C:UsersAdministrator>pip install pymysql
Requirement already satisfied: pymysql in c:usersadministratorappdatalocalp
rogramspythonpython35libsite-packages
這些命令告訴我,我已經安裝過了
因此另外一種可能出在程序代碼上,將import mysqldb 改成import pymsql
程序運行成功
【參考】python3的玩家們 pymysql把mysqldb庫取代了 - Magicbreaker的專欄 - 博客頻道 - CSDN.NET
http://blog.csdn.net/magicbre...
2.ImportError: No module named 'BeautifulSoup'
緣由:
原來Beautifulsoup 4,更名爲bs4了
【解決過程】mysql
後來是參考bs4的官網文檔:sql
http://www.crummy.com/softwar...
代碼以下:
from bs4 import BeautifulSoupapp
soup = BeautifulSoup(open("index.html"))機器學習
soup = BeautifulSoup("<html>data</html>"
【參考】
【已解決】Python3中,已經安裝了bs4(Beautifulsoup 4)了,可是卻仍是出錯:ImportError: No module named BeautifulSoup – 在路上
https://www.crifan.com/python...
3.報錯:
「AttributeError: 'module' object has no attribute 'urlopen'」
module 'urllib' has no attribute 'urlopen'等等
緣由是Python3裏的urllib模塊已經發生改變,此處的urllib都應該改爲urllib.request。
【參考】AttributeError: module 'urllib' has no attribute 'urlopen' - u012133509的博客 - 博客頻道 - CSDN.NET
http://blog.csdn.net/u0121335...學習
4.問題未解決:
python3 新手一枚,運用Python3.4.1爬網頁,網易的機器學習網頁,報Unicodedecodeerror,該網頁是utf-8._百度知道
https://zhidao.baidu.com/ques... reload(sys)找不到,name 'reload' is not defined - 雲淡風輕 - 博客頻道 - CSDN.NET
http://blog.csdn.net/x3569826...
正確代碼以下(本人python3.5):ui
#!user/bin/env python # -*- coding:gbk -*- # import importlib # importlib.reload(sys) import re import urllib.request,os import pymysql from bs4 import BeautifulSoup url1="http://www.doyouhike.net/dest/hongkongtamendao-camping" # 賦一個URL fp = urllib.request.urlopen(url1) #打開此URL s = fp.read() #把上面操做的結果讀取出來賦值給S soup = BeautifulSoup(s) # 用BeautifulSoup分析S polist = soup.findAll('span') # 找到全部tag <span>的內容 print (polist[0].contents[0]) # 打印出第一個tag <span>中間的內容