菜鳥寫Python-Scrapy shell 帶頭部headers請求：使用scrapy shell 命令請求源代碼（response）並寫入本地文件

1.scrapy shell 命令請求網頁：html scrapy shell "https://www.baidu.com"正則表達式 就會獲得請求的網頁源代碼，咱們經過response.text能夠獲取請求以後的源代碼，而後就能夠經過正則匹配咱們想要的內容。shell 2.而後上面請求方法，對一些不作限制的網站請求時ok，可是就如以前所講的，不少網站對沒有設置請求頭的請求都是禁止訪問，因此咱們

>>阅读原文<<