Scrapy爬蟲教程三 詳細的Python Scrapy模擬登錄知乎

之前爬取攜程和51job都是免登陸就能爬取數據的，但是今天爬取知乎的時候就需要登錄後才能爬到數據，那我們只能進行模擬登錄了。 知乎登錄分爲郵箱登錄和手機登錄兩種方式，通過瀏覽器的開發者工具查看，我們通過不同方式登錄時，網址是不一樣的。郵箱登錄的地址email_url = 'https://www.zhihu.com/login/email'，手機登錄網址是phone_url = 'http://w

>>阅读原文<<