Spark項目練習(計算用戶訪問學科子網頁的top3)

項目說明:附件爲要計算數據的demo。點擊打開連接php 利用spark的緩存機制,讀取須要篩選的數據,自定義一個分區器,將不一樣的學科數據分別放到一個分區器中,而且根據指定的學科,取出點擊量前三的數據,並寫入文件。java 具體程序以下:數據庫 一、項目主程序:apache package cn.allengao.Location import java.net.URL import org
相關文章
相關標籤/搜索