採用Kettle分頁處理大數據量抽取任務

需求: 將Oracle數據庫中某張表歷史數據導入MySQL的一張表裏面。 源表(Oracle):table1 目標表(MySQL):table2 數據量:20,000,000         思路: 由於服務器內存資源有限,所以,無法使用Kettle一次性從源表導入目標表千萬級別的數據,考慮採用分頁導入的方式來進行數據傳輸,即: 根據實際情況設置一個每次處理的數據量,比如:5,000條,然後根據總
相關文章
相關標籤/搜索