Python面試常見問題

爬蟲面試常見問題 一.項目問題：python 你寫爬蟲的時候都遇到過什麼反爬蟲措施，你是怎樣解決的git 用的什麼框架。爲何選擇這個框架面試 二.框架問題：redis scrapy的基本結構（五個部分都是什麼，請求發出去的整個流程）算法 scrapy的去重原理（指紋去重究竟是什麼原理）數據庫 scrapy中間件有幾種類，你用過哪些中間件django scrapy中間件在哪裏起的做業（面向切片編程）

>>阅读原文<<