實時計算——聊一聊我所經歷的計算框架

在聊實時計算以前，先說一下我對離線和批量、實時和流式的一些見解。數據庫 咱們首先來簡單看一下計算任務的大體流程：api 首先先說下批量計算和流式計算：緩存 圖中顯示了一個計算的基本流程，receiver處負責從數據源接收數據，併發送給下游的task，數據由task處理後由sink端輸出。服務器 以圖爲例，批量和流式處理數據粒度不同，批量每次處理必定大小的數據塊（輸入通常採用文件系統），一個task

>>阅读原文<<