掌握python爬蟲對http代理接入

什麼是爬蟲，講點通俗易懂的，爬蟲就是爬取網頁，從中按照必定規則提取信息，重複以上過程自動化重複完成的程序。 爬蟲程序，第一件事情就是要爬取網頁，這裏主要是指獲取網頁的源代碼。在網頁的源代碼裏，會含有咱們所須要的信息，而咱們要作的事情就是從源代碼中將這些信息提取出來。 咱們請求網頁的時候， Python 爲咱們提供了不少庫來作這件事情，好比官方提供的 urllib ，以及第三方提供的 request

>>阅读原文<<