[python]-urllib和urllib2模塊

轉自：http://zeping.blog.51cto.com/6140112/1143722

urllib 和urllib2都是接受URL請求的相關模塊，可是提供了不一樣的功能。

urllib提供urlencode方法用來GET查詢字符串的產生，而urllib2沒有。

urllib：

網頁基礎：

import urllib
#打開51cto
cto = urllib.urlopen('http://www.51cto.com')
#打開本地文件：cto = urllib.urlopen(url='file:/root/python/ulib')
#打開ftp：cto = = urllib.urlopen(url='ftp://用戶名:密碼@ftp地址/')
#讀取51cto首頁的代碼
print cto.read()
#獲取遠程服務器返回的頭信息，跟curl -I www,51cto.com差很少
print cto.info()
#返回http狀態碼，200表示成功，404表示網址未找到
print cto.getcode()
#返回請求的URL
print cto.geturl()
#運行結果
[root@localhost python]#python ctourl
。。。。。。。省略cto.read()函數，輸出太多啦。。。。。
Server: Tengine  #cto.info()返回信息
Date: Wed, 27 Feb 2013 15:05:46 GMT
Content-Type: text/html
Connection: close
Vary: Accept-Encoding
Load-Balancing: web48

200              #cto.getcode()返回信息
http://www.51cto.com   #cto.geturl()返回信息
#urlopen返回的是一個類文件對象，而這個對象的使用方法和文件對象的
#使用方法徹底同樣。

 字符的編碼和解碼：

 

import urllib,os
#對字符串進行編碼
stra = urllib.quote('this is python')
print stra
#對字符串進行解碼
print urllib.unquote(stra)
#這個方法用‘+’代替了%20 和urllib.quote相似，
strb = urllib.quote_plus('this is python')
print strb
#解碼
print urllib.unquote_plus(strb)

dicta = {'name':'zeping','passwd':'123456'}
#urlencode將字典轉換成url參數
print urllib.urlencode(dicta)

#將本地路徑轉換成url路徑
filename = urllib.pathname2url('/python/test.py')
print filename
#將url路徑轉換成本地路徑
print urllib.url2pathname(filename)

##########運行結果##########
[root@localhost python]# python quote
this%20is%20python
this is python
this+is+python
this is python
passwd=123456&name=zeping
/python/test.py
/python/test.py

urllib.urlretrieve():下載

import urllib
def Schedule(a,b,c):
    '''''
    a:已經下載的數據塊
    b:數據塊的大小
    c:遠程文件的大小
   '''
    per = 100.0 * a * b / c
    if per > 100 :
        per = 100
    print '%.2f%%' % per

#這裏如下載緩存插件爲例
url = 'http://fastlnmp.googlecode.com/files/eaccelerator-0.9.6.tar.bz2'
#獲取文件名，這裏是下載到當前目錄下，若果要下載到別的目錄必
#須輸入絕對路徑和文件名字：/root/tools/eaccelerator-0.9.6.tar.bz2
local = url.split('/')[-1]
urllib.urlretrieve(url,local,Schedule)
#########運行結果##########
[root@localhost urllib]# python down
0.00%
7.74%
15.48%
23.22%
30.96%
38.70%
46.44%
54.18%
61.92%
69.66%
77.40%
85.15%
92.89%
100.00%
[root@localhost urllib]# ls
down  eaccelerator-0.9.6.tar.bz2  ulib2

urllib2：

urllib2能夠接受一個Request類的實例來設置URL請求的headers，urllib僅能夠接受URL。

以上轉自：http://zeping.blog.51cto.com/6140112/1143722