大數據量快速處理的架構設計

       在業務數據的處理過程當中，常常會遇到夜間批次處理大量的數據，並且會有時效的要求，這就對程序執行的性能有了較高要求。特別是當應用系統跑了2年以上時，就會有大表或者特大表的操做了，數據量達到百萬甚至上億。 這時回顧前期的設計，就可能會發現好多問題。 多是因爲數據模型設計的時候沒有考慮表的分區和及時歸檔，形成大表處理慢； 也多是涉及到的sql的設計沒有考慮走索引，或有隱式轉換、全表掃描、笛

>>阅读原文<<