反爬蟲戰爭進行了十八年，但一切纔剛剛開始

在一大堆技術術語裏，最爲被普通人所熟知的大概就是「爬蟲」了。其實爬蟲這個名字就已經特別好地表現出了這項技術的作用——像密密麻麻的蟲子一樣分佈在網絡上，爬行至每一個角落獲取數據；也一定程度上表達了人們對這項技術的情感傾向——蟲子或許無害，但總是不受歡迎的。 有關爬蟲的功能、益處或危害，此前已經有過很多討論。因爲爬蟲技術造成的大量IP訪問網站侵佔帶寬資源、以及用戶隱私和知識產權等危害，很多互聯網企業都

>>阅读原文<<