python知識點(爬蟲)

時間 2019-11-20

標籤 python 知識爬蟲欄目 Python 简体版

原文原文鏈接

網絡爬蟲：
網站python

　　按渲染方式瀏覽器

　　　　　　　　服務端渲染網絡

　　　　　　　　　　　　　　基礎庫app

　　　　　　　　　　　　　　　　　　urllib---原生底層庫curl

　　　　　　　　　　　　　　　　　　urllib3---相比urllib增長特性異步

　　　　　　　　　　　　　　　　　　httplib2---基礎請求庫網站

　　　　　　　　　　　　　　　　　　pycurl---libcurl的python實現url

　　　　　　　　　　　　　　　　　　hyper---支持HTTP2新特性ip

　　　　　　　　　　　　　　封裝庫同步

　　　　　　　　　　　　　　　　　　requests---基於urllib3簡單易用

　　　　　　　　　　　　　　　　　　grab---基於urllib3及PyQuery封裝

　　　　　　　　　　　　　　　　　　MechanicalSoup---基於requests和BeautifulSoup封裝

　　　　　　　　客戶端渲染

　　　　　　　　　　　　　　尋找Ajax請求

　　　　　　　　　　　　　　模擬瀏覽器

　　　　　　　　　　　　　　模擬JavaScript

　　按同步異步app

相關標籤/搜索

每日一句

每一个你不满意的现在，都有一个你没有努力的曾经。