scrapy 調試功能

  在使用 scrapy 來爬取網頁的時候,我們難免會使用到調試功能,下面介紹兩種調試方法: 1.終端使用 scrapy shell exampleurl exampleurl 爲你要爬取網站的 url 。 開啓調試界面後終端顯示如下(類似 IPython): 接下來就可以在命令行中輸入各種方法來獲取網頁內容查看實時效果了。如通過 response.css() 或 response.xpath()
相關文章
相關標籤/搜索