python3 [爬蟲入門實戰] 查看網站有多少個網頁(站點)

前提:進行爬蟲的時候需要進行站點的爬取,再選用合適的爬蟲框架 所以這裏不得不需要知道一下一個網站到底有多少個網頁組成,一個域名網站中到底有多少個站點 查看的方法很簡單: 直接百度就可以了: 例如需要知道豆丁網的站點有多少個: 直接在百度中輸入:site:www.docin.com 結果都在畫圈中進行體現了。
相關文章
相關標籤/搜索