使用scrapy抓取sinanew網站

平時搞爬蟲都是自己寫函數,寫了很長時間,突然聽到朋友說,框架很好用,可以來嘗試嘗試,所以就來了解了解scrapy,但是接觸之後,並沒有感覺到框架好用,可能是自己使用框架經驗還不足吧,也研究了好多天,下邊把我的經驗跟大家分享一下,有錯誤的話,歡迎指正! 1,這次抓取的網站是http://news.sina.com.cn/guide/,網上也有這個網站的抓取案例,因爲忘了鏈接,就不附上了 首先創建項目
相關文章
相關標籤/搜索