使用Spark Streaming分析國泰安股票交易數據

1、前言  這個小程序是《雲計算》這門課的一次小做業,實現過程涉及到挺多知識,主要使用Spark Streaming來處理流數據,該數據來自國泰安股票交易數據,程序實現上使用一個進程模擬寫入HDFS或本地文件夾的流數據,使用另外一個進程運行Spark程序處理流數據。web 2、環境搭建   該程序的Spark運行環境搭建在四臺騰訊雲服務器上,其中有三臺做爲一個集羣,另一臺使用MongoDB做爲數據
相關文章
相關標籤/搜索