python 爬取網易新聞評論

前段時間在看處理數據相關的書籍,實踐中需要一些網上評論的文本數據集,所以想到爬取網易新聞底下的評論。本來想着Python+beautifulsoup(解析)+requests(抓取),最後存儲在txt文件中就OK,廢話不多說,試試吧~ 以這條新聞爲例,可以看到,網易的新聞頁面和評論頁面是分開的,我們點進評論頁面 我們看到一如既往的「支持加油」,還有評論頁面的****url:http://comme
相關文章
相關標籤/搜索