爬蟲「學前班」，記住這些不踩坑！

摘要：爬蟲就是模擬人的訪問操作來獲取網頁/App數據的一種程序。 爬蟲是什麼？ 簡單的說爬蟲就是模擬人的訪問操作來獲取網頁/App數據的一種程序。我們可以把互聯網比作一張大網，而爬蟲（即網絡爬蟲）便是再網上爬行的蜘蛛。把網的節點比作一個個網頁，爬蟲爬到這就相當於訪問了該頁面，獲取了其信息。可以把節點間的連線比作網頁與網頁之間的鏈接關係，這樣蜘蛛通過一個節點後，可以順着節點連線繼續爬行到達下一個節點

>>阅读原文<<