記一次我百萬數據級python爬蟲的未成功案例

今天,突發奇想,要不把csdn的所有用戶信息給爬下來咋樣呢。 想想自己能完成這樣一個高端有趣的爬蟲就興奮誒,爬完我就可以自稱,百萬數據高級爬蟲工程獅了! 揮一揮衣袖,說幹就幹! Test One 如果要爬取所有用戶,那應該從哪下手呢? 這個超簡單嘛,我先看看csdn到底有多少用戶 從這裏就可以看出,用戶應該是134萬人左右吧 知道用戶數了,要爬取還不簡單麼? 很明顯,從每個人的粉絲開始出發!只要將
相關文章
相關標籤/搜索