分佈式技術追蹤 2017年第一期

 

分佈式系統實踐

1. 大話分佈式系統理論基礎

http://dwz.cn/4UWN7i

摘要: 一致性是分佈式系統的理論基礎, 這篇文章從2PC, 3PC開始, 概述了支撐分佈式系統一致性的各個理論, 便於你們再進行更深刻和細緻的學習.

2. 美團雲混合存儲系統

http://dwz.cn/4VpOzJ

摘要: (編者的話)美團雲的李慧霸分享的混合存儲系統議題很是獨特，美團雲的存儲系統是本身開發的，沒有使用開源系統，整個建設思路和方法值得借鑑，所以特別分享下李慧霸的PPT。

服務化和虛擬化技術

1. 京東容器集羣建設之路

http://dwz.cn/4VTIRl

摘要: 京東應該是引入docker比較早的公司了, 藉助於在OpenStack上的經驗, 基於OpenStack開發了第一代容器雲平臺, 運行的容器多達15萬. 本文介紹了京東容器雲建設之路, 爲大規模的容器應用提供了一個良好的案例.

2. 網易蜂巢基於萬節點kubernetes支撐大規模雲應用實踐

http://dwz.cn/4VZOhy

摘要: 網易蜂巢容器雲平臺, IaaS層基於OpenStack支持計算, 存儲, 網絡的虛擬化, PaaS層使用k8s實現容器的編排, 同時提供緩存, 數據庫等通用SaaS, 是一個典型的虛擬機+容器的實踐.

高可用技術

1. 微信PaxosStore內存篇：十億Paxos/分鐘的挑戰

http://dwz.cn/4WMcoE

摘要: 今年微信開源了不少東西, 特別是一些列圍繞paxos的應用, 好比以前介紹過的PhxSQL等, 可見微信團隊在Paxos上進行了很多的工程實踐, 值得咱們學習和借鑑.

2. Google是如何作負載均衡的？

http://dwz.cn/4Xj633

摘要: Google 使用的技術通常都自帶光環，吸引程序員的注意，基礎設施方面的東西就更是如此，年初 Google 發佈了篇論文介紹內部的負載均衡器的實現，讓咱們有機會一睹多是全球最好的負載均衡器。Maglev修改源IP爲路由器IP, 讓響應包繞過負載均衡器直接, 直接面向網卡編程, 繞過linux內核協議棧, 使用一致性hash硬生生的把有狀態的服務改爲了無狀態.

運維和DevOps技術

1. Netflix Conductor：微服務編排器

http://dwz.cn/4UX6U5

摘要: 工做流引擎是管理例行運維的最有效工具, 一直想找一個好用的工做流引擎, 相似amazon SWF, 惋惜SWF不開源. 不少開源的工做流引擎都在支持DAG上下功夫, 然而對於運維任務來講, 對於DAG沒有強需求, 強需求是簡單可編程的工做流管理. 下來能夠仔細研究研究.

2. 萬臺分佈式數據庫的創新運營

http://dwz.cn/4VSVZD

摘要: 數據服務這種有狀態的服務一直是運維的"災區", 由於不能丟數據, 因此在運維處理上必須很是當心謹慎. 這篇文章介紹了騰訊萬臺規模的分佈式KV存儲系統的運維經驗, 文章談到的使用訪問密度刻畫服務負載能力, 存儲備機的複用, 自動擴縮容和數據搬遷, 不一樣訪問密度的服務混布, 故障自愈能力等方面都很是值得學習.

基礎和文化

1. 一種NVMe SSD友好的數據存儲系統設計

http://dwz.cn/4VqcUS

摘要: 傳統存儲系統的不少設計理念再也不適用於閃存存儲系統, 所以無論是咱們自身仍是業界都在尋找SSD友好的存儲引擎, 這篇文章介紹的存儲引擎將隨機寫轉換成順序寫, 而隨機讀保持不變, 同時針對設計了針對SSD垃圾回收的垃圾回收策略, 從而實現了面向SSD友好的存儲引擎設計.

2. Docker背後的內核知識——Namespace資源隔離

http://dwz.cn/4W0izO

摘要: namespace隔離是實現容器隔離的技術手段之一, 這篇文章科普了namespace隔離的機制, 包括了linux 六大namespace, 文章分爲上下兩部分. 連接中的是上篇, 下篇http://dwz.cn/4WLWEb

---

分佈式技術動態週刊運轉一年半以來受到了不少同窗的好評, 不過一直髮布在公司的內部wiki上. 爲了讓更多的朋友也能看到, 我申請了一個微信公衆號, 每週同步發佈, 但願可以幫助你們在衆多技術類文章中挑選出分佈式技術方向比較優秀的文章, 讓不一樣層次的朋友都能有所收穫.