Python爬蟲（一）：爬蟲僞裝

1 簡介 對於一些有一定規模或盈利性質比較強的網站，幾乎都會做一些防爬措施，防爬措施一般來說有兩種：一種是做身份驗證，直接把蟲子擋在了門口，另一種是在網站設置各種反爬機制，讓蟲子知難而返。 2 僞裝策略 我們知道即使是一些規模很小的網站通常也會對來訪者的身份做一下檢查，如驗證請求 Headers，而對於那些上了一定規模的網站就更不用說了。因此，爲了讓我們的爬蟲能夠成功爬取所需數據信息，我們需要讓爬

>>阅读原文<<