Scrapy框架爬蟲學習--1

寫在前面:今天上午把手勢控制播放器的Demo弄完了。可以學習自己的東西了。因爲要找爬蟲的實習,所以學習一下Scrapy框架的爬蟲。這個和之前做的腳本爬蟲是對應的。不過好像是說Scrapy的分佈式爬蟲更加牛逼,沒有不可以爬的網站。 1. 安裝 2. 來看一下基本的操作。 在終端下輸入  scrapy shell url,就相當於之前的Request請求 請求之後可以看一下 response,可以看到
相關文章
相關標籤/搜索