轉換步驟使用分區

分區的目的是充分利用多核CPU的優勢,提高數據處理並行度。 處理步驟流程效果 意圖:從文本文件中讀取數據,增加一個常量列以後,在內存中按no分組統計記錄條數,輸出到文件 準備數據 步驟解析 首先在轉換的主對象樹下,新建分區schemas 定義分區,分區ID有幾個就有多少個分區,名字隨便 然後右鍵【在內存中分組】,選擇【分區】->Remainder of divison->你的分區schema->M
相關文章
相關標籤/搜索