大數據和高併發的解決方案總結

如今，軟件架構變得愈來愈複雜了，好多技術層出不窮，使人眼花繚亂，解決這個問題呢，就是要把複雜問題簡單化，核心就是要把握本質。

軟件剛開始的時候是爲了實現功能，隨着信息量和用戶的增多，大數據和高併發成了軟件設計必須考慮的問題，那麼大數據和高併發本質是什麼呢？

本質很簡單，一個是慢，一個是等。二者是相互關聯的，由於慢，因此要等，由於等，因此慢，解決了慢，也就解決了等，解決了等，也就解決了慢。

關鍵是如何解決慢和等，核心一個是短，一個是少，一個是分流。

短是指路徑要短。典型的mvc結構是請求->controller->model->dao->view，而後把頁面返回給用戶。要想短的話，

1，頁面靜態化- 用戶能夠直接獲取頁面，不用走那麼多流程，比較適用於頁面不頻繁更新。

2，使用緩存- 第一次獲取數據從數據庫準提取，而後保存在緩存中，之後就能夠直接從緩存提取數據。不過須要有機制維持緩存和數據庫的一致性。

3，使用儲存過程-那些處理一次請求須要屢次訪問數據庫的操做，能夠把操做整合到儲存過程，這樣只要一次數據庫訪問就能夠了。

4，批量讀取 - 高併發狀況下，能夠把多個請求的查詢合併到一次進行，以減小數據庫的訪問次數

5，延遲修改 - 高併發狀況下，能夠把屢次修改請求，先保存在緩存中，而後定時將緩存中的數據保存到數據庫中，風險是可能會斷電丟失緩存中的數據，

6,  使用索引 - 索引能夠看做是特殊的緩存，儘可能使用索引就要求where字句中精確的給出索引列的值。

少是指查詢的數據要少。

1，分表 - 把原本同一張表的內容，能夠按照地區，類別等分紅多張表，很簡單的一個思路，可是要儘可能避免分出來的多表關聯查詢。

2，分離活躍數據 - 例如登陸用戶業務，註冊用戶不少，可是活躍的登陸用戶不多，能夠把活躍用戶專門保存一張表，查詢是先查詢活躍表，沒有的話再查總表，這也相似與緩存啦。

3， 分塊 - 數據庫層面的優化，對程序是透明的，查詢大數據只用找到相應塊就行。

分流三種。

1，集羣 - 將併發請求分配到不一樣的服務器上，能夠是業務服務器，也能夠是數據庫服務器。

2，分佈式 - 分佈式是把單次請求的多項業務邏輯分配到多個服務器上，這樣能夠同步處理不少邏輯，通常使用與特別複雜的業務請求。

3，CDN - 在域名解析層面的分流，例如將華南地區的用戶請求分配到華南的服務器，華中地區的用戶請求分配到華中的服務器。

 

暫時總結這麼多的方案，隨着技術的進步，會有更多的方案出現，一塊兒成長進步中。。。。。