Python爬蟲 爬取百合網的女人們和男人們

學Python也有段時間了,目前學到了Python的類。我的感受Python的類不該稱之爲類,而應稱之爲數據類型,只是數據類型而已!只是數據類型而已!只是數據類型而已!重要的事情說三篇。sql

據書上說一個.py(常量、全局變量、函數、數據類型)文件爲一個模塊,那麼就有了一種感受:常量、全局變量、函數、數據類型是同一「級別的」。在此很少說了,收回本身的心思來看爬蟲吧!json

一、進百合網官網

單擊「搜索」、單擊「基本搜索」,這時會跳向另外一個頁面,該頁面爲登陸頁面(如圖):微信

二、找到login.js,具體步驟:F十二、F五、network、js(如圖):

三、找登陸時的異步請求,該請求在login.js中(如圖):

四、單擊「基本搜索」,會獲得兩個異步請求

1:獲取160個id (如圖): 異步

2:根據id獲得用戶詳細信息,爲json數據(如圖): 函數

說了這麼多,該上代碼了(總共261行):blog

在此我就分享一下 所須要用到的模塊源碼

  • requests
  • time
  • pymssql

想獲取源碼,能夠關注微信公衆號:requests

相關文章
相關標籤/搜索