python 爬取網易新聞評論

前段時間在看處理數據相關的書籍，實踐中須要一些網上評論的文本數據集，因此想到爬取網易新聞底下的評論。原本想着Python+beautifulsoup(解析)+requests(抓取)，最後存儲在txt文件中就OK，廢話很少說，試試吧~html 以這條新聞爲例，能夠看到，網易的新聞頁面和評論頁面是分開的，咱們點進評論頁面web 咱們看到一如既往的「支持加油」，還有評論頁面的****url：http:

>>阅读原文<<