python爬蟲02：網站樹結構，深度優先及廣度優先

python爬蟲02：網站樹結構，深度優先及廣度優先 1.網站的url結構 2.深度優先算法 3.廣度優先算法 1.網站的url結構 url設計時都是有分層的 有時候下層的網頁裏又會有上層的鏈接，所以爬取url時要進行去重。 2.深度優先算法 這個學過一些算法都應該知道吧，不細說了。 順序：ABDEICFGH， scrapy也是這樣來的。 二叉樹版： 3.廣度優先算法 這個學過一些算法的也應該知道

>>阅读原文<<