遷移數據方案

我們在做系統的時候,有時候會遇到遷移數據或者處理任務(任務量又比較大),比如把redis的數據取出來做一些操作,然後處理完的數據在存到hbase 我們需要考慮到數據處理過程中失敗情況,需要處理高併發去執行,具體怎麼設計,怎麼做呢, 有一種簡單的方式如下: 1我們先把任務數據存到redis任務隊列裏 2定義一個bean啓動3個線程來處理    線程1的:從任務隊列取出數據,同時存到備份隊列,用red
相關文章
相關標籤/搜索