CNKI知網論文數據爬取

知網論文數據爬取 花了一些時間爬了一些知網數據。接口主要是：http://search.cnki.com.cn/ ，當然因爲它搜索出來的文章介紹頁是這樣的： 缺少關鍵詞呀，所以結合了一下學校的知網數據庫，介紹頁面基本上就有了需要的所有數據。 將兩個介紹頁面的鏈接進行了比較，發現可以先從第一個接口爬取論文介紹頁鏈接，然後再做一些改變就可以利用第二個爬取數據了。 在此次實踐中，我先爬取了所有「大數據」

>>阅读原文<<