maxwell解析MySQL日誌及應用

大概在2年前，咱們的數據庫愈來愈大，天天經過Sqoop徹底同步數據庫到HIVE的方式時間明顯拉長，當時考慮使用canal來解析日誌，而後經過impala+kudu作增量更新，這樣不只解決了數據同步問題，還能實時，並且還能作消息中心，可是這個項目並無作完。 如今的maxwell由於解析日誌成json格式，在處理方面更加方便一點，所以有想來開發一個maxwell版的增量同步。前端 增量同步實際上沒有太

>>阅读原文<<