反爬蟲技術實踐案例

  筆者第一份工作就是以java工程師的名義寫爬蟲，不得不說第一份工作很重要啊，現在除了爬蟲不會幹別的，到現在已經幹了近5年了，期間經歷了不少與反爬策略的鬥爭。最近又耗時兩週成功搞定了某網站的反爬策略後，心裏有點莫名的惆悵。今日無心工作，就總結下這些年與網站互懟的經驗吧。 無反爬裸站 現在一個網站或多或少都會配置一定的反爬措施，畢竟現在一臺筆記本的性能比某些小站的服務器都強，如果不加以限制，分分鐘

>>阅读原文<<