使用Kettle增量抽取MongoDB數據實踐

需求: 增量抽取MongoDB數據並加載到MSSQL 由於不能使用關係型數據庫的自定義SQL, 所以主要遇到的問題有: 增量時間的查詢和參數控制 ETL的批次信息和調用參數的寫入   第一個問題的解決如下: 使用命名參數在Query頁中進行過濾, 一開始會擔心${}的引用方式會用Mongo的語法衝突, 測試後發現運行正常   第二個問題: 先爲結果增加常量值, 如常量值固定則直接寫死, 不固定的常

>>阅读原文<<