網絡爬蟲之必備知識

  摘要：本文主要理清網絡爬蟲的概念，簡要講解爬蟲的必備知識，分爲python基礎、字符編碼、http頭信息、http狀態碼、html基礎、爬蟲職業道德。內容淺顯，主要理一理相關知識。 一、網絡爬蟲的概念   網絡爬蟲，又被稱爲網頁蜘蛛，網絡機器人，是一種按照一定的規則，自動地抓取萬維網信息的程序或者腳本。 通俗的說，我們寫爬蟲的目的就是自動從不同的網頁上提取海量的數據。以下是我之前爬取的部分數據

>>阅读原文<<