flink入門（一）——基本原理與應用場景

1、簡介

　　1.簡介

　　flink是一個開源的分佈式流處理框架

　　優點：高性能處理、高度靈活window操做、有狀態計算的Exactly-once等

　　詳情簡介，參考官網：https://flink.apache.org/flink-architecture.html

　　　　　　　中文參考：https://flink.apache.org/zh/flink-architecture.html

　　flink組件介紹：

　　

　　1）部署：支持本地、集羣（支持yarn資源管理）、雲

　　2）核心層：提供了計算的核心

　　3）API：提供了面向流處理的DataStream和麪向批處理的DataSet

　　4）類庫：支持Table/SQL

 　　基本架構爲 DataSource（數據源） -> Transfromation（算子處理數據） ->DataSink（數據目的）

　　2.框架對比：

　　

　　checkpoint就是檢查點的意思，在重要位置設置檢查點（快照），實現容錯！https://blog.csdn.net/qq_39532946/article/details/78306809