spark案例---實現ip地址查詢

通過Spark實現ip地址查詢 1.需求分析 ​ 在互聯網中,我們經常會見到城市熱點圖這樣的報表數據,例如在百度統計中,會統計今年的熱門旅遊城市、熱門報考學校等,會將這樣的信息顯示在熱點圖中。 通過日誌信息(運行商家或者網站自己生成)和城市ip段信息來判斷用戶的ip段,統計熱點經緯度。 2.技術調研 因爲我們的需求是完成一張報表信息,所以對程序的實時性沒有要求,所以可以選擇內存計算spark來實現
相關文章
相關標籤/搜索