Python網絡爬蟲——學習心得

網絡爬蟲，即Web Spider，是一個很形象的名字。 把互聯網比喻成一個蜘蛛網，那麼Spider就是在網上爬來爬去的蜘蛛。網絡蜘蛛是經過網頁的連接地址來尋找網頁的。 從網站某一個頁面（一般是首頁）開始，讀取網頁的內容，找到在網頁中的其它連接地址，而後經過這些連接地址尋找下一個網頁，這樣一直循環下去，直到把這個網站全部的網頁都抓取完爲止。 若是把整個互聯網當成一個網站，那麼網絡蜘蛛就能夠用這個原理

>>阅读原文<<