scrapy新浪微博爬蟲

最近由於作畢設的緣由，須要採集一批數據。本着本身動手的原則，重新浪微博上採集到近百位你們耳熟能詳的明星14-18年的微博內容。看看大佬們日常都在微博上都有哪些動態吧～ 1.首先項目採用scrapy編寫，省時省力誰用誰知道。 採集的網站爲weibo.com，是微博的網頁端。稍稍麻煩了一點，但相對於移動段和wap站點來講內容稍微更全一點。 2.採集以前咱們先來看下微博都給咱們設置了哪些障礙。css 登

>>阅读原文<<