大數據處理流程

大數據處理流程     上圖是一個簡化的大數據處理流程圖,大數據處理的主要流程包括數據收集、數據存儲、數據處理、數據應用等主要環節。下面將逐一對各個環節所需要的技術棧進行講解:  數據採集 目前中大型項目通常採用微服務架構進行分佈式部署,數據的採集需要在多臺服務器上進行,且採集過程不能影響正常業務的開展。基於這種需求,就衍生了多種日誌收集工具,如 Flume 、Logstash、Kibana 等,
相關文章
相關標籤/搜索