MSpider爬蟲搜索

這是我自己做的一個爬蟲,是基於詞頻密度過濾、利用百度、谷歌、搜搜、360搜索4個引擎爲種子來源的多線程爬蟲,結果存入mysql。用到了jsoup和webclient。 github:https://github.com/wo4li2wang/MSpider 寫這個純是個人興趣做的,因爲我參加過數學建模,我一直想把數學模型用到程序裏,所以嘗試着寫了這個東東,但好多功能沒辦法實現。希望大家能提供一些指
相關文章
相關標籤/搜索