python爬蟲最新常見面試題

一.項目問題：python 1.你寫爬蟲的時候都遇到過什麼反爬蟲措施，你是怎麼解決的redis 2.用的什麼框架，爲何選擇這個框架(我用的是scrapy框架，因此下面的問題也是針對scrapy)mongodb 二.框架問題（scrapy）可能會根據你說的框架問不一樣的問題，可是scrapy仍是比較多的數據庫 1.scrapy的基本結構（五個部分都是什麼，請求發出去的整個流程）編程 2.scrapy

>>阅读原文<<