Python 爬蟲從入門到進階之路（四）

之前的文章我們做了一個簡單的例子爬取了百度首頁的 html，我們用到的是 urlopen 來打開請求，它是一個特殊的opener（也就是模塊幫我們構建好的）。但是基本的 urlopen() 方法不支持代理、cookie等其他的HTTP/HTTPS高級功能，所以我們需要用到 Python 的 opener 來自定義我們的請求內容。 具體步驟： 使用相關的 Handler處理器 來創建特定功能的處理器

>>阅读原文<<