python基礎筆記分享1-爬蟲介紹

1. 什麼是爬蟲？ 網絡爬蟲也叫網絡蜘蛛，如果把互聯網比喻成一個蜘蛛網，那麼蜘蛛就是在網上爬來爬去的蜘蛛，爬蟲程序通過請求url地址，根據響應的內容進行解析採集數據， 比如：如果響應內容是html，分析dom結構，進行dom解析、或者正則匹配，如果響應內容是xml/json數據，就可以轉數據對象，然後對數據進行解析。 2. 有什麼作用？ 通過有效的爬蟲手段批量採集數據，可以降低人工成本，提高有效數

>>阅读原文<<