大數據基礎架構方案

大數據架構方案,主要包括整個大數據的軟件棧,主要功能包括:數據抽取,數據存儲,數據分析,數據挖掘web 下面是整個架構設計圖: 數據庫 數據抽取 關係型數據庫,經過sqoop導入 日誌文件經過flume導入架構 數據存儲 採用hdfs,hbase等爲數據存儲的主體 對於文本檢索則採用es/solr等搜索技術 分析後的結果數據能夠採用關係型數據庫存儲框架 數據分析 採用spark,mapreduce
相關文章
相關標籤/搜索