小米 MySQL 數據實時同步到大數據數倉的架構與實踐

背景 MySQL由於自身簡單、高效、可靠的特點,成爲小米內部使用最廣泛的數據庫,但是當數據量達到千萬/億級別的時候,MySQL的相關操作會變的非常遲緩;如果這時還有實時BI展示的需求,對於mysql來說是一種災難。 爲了解決sql查詢慢,查不了的業務痛點,我們探索出一套完整的實時同步,即席查詢的解決方案,本文主要從實時同步的角度介紹相關工作。 早期業務藉助Sqoop將Mysql中的數據同步到Hiv
相關文章
相關標籤/搜索