黃東旭：在中國打造數據庫初創公司

公司

• 總共成立四年，前兩年都在寫代碼，最近一年半有一兩百家企業在用
• Infra 在中國作頗有優點，由於中國市場大，公司快糙猛拿來主義，infra 的好東西可以很快地被用上
• cofounders 裏面沒有 db 的經驗
• open source 模式是將來，若是是閉源只能一家一家談
• 最重要的商業決策：不在於算法有多nb 團隊有多厲害，護城河的關鍵在於 1）社區 2）mysql 接口 (借用了 mysql 的社區開始，SQL 的支持很重要，好比連Kafka, Spark都支持 SQL )

TiDB 數據庫原理

越nb的工程師越喜歡高性能，認爲越快越好。可是 TiDB 的首要目標不是作到最快，而是作到 Availability reliability 穩定性 IO和 無限擴展。高性能的成本過高，要根據用戶的硬件優化。可是這裏是通用的數據庫，不可能去優化各類場景。簡單留給用戶，複雜留給本身（跟AWS意見相反）。

認爲 eventual consistency 是個僞概念，實際上就是沒一致性或者弱一致性。好比 cassandra WRN 設置好了，但到底過多久 可以resolve？不肯定。太複雜，用戶最好不須要知道操心這些複雜的設置。

跑分不是惟一的指標，TPCC/TPCH 分數高對實際沒有太多指導意義。數據庫是磨出來的。好比第一家客戶，遊戲公司，竟然建立了3萬張表，json 的 meta 信息連起來很是慢。

構架上不是 P2P，而是不一樣角色分得很清楚。

KV 用的是 RocksDB 可是典型的 LSM tree 的寫放大是15倍，這裏優化到 value 拆出來，解決寫放大的問題。

支持 MySQL 的client，也支持 SparkSQL 的讀。

SQL layer 沒有用 MySQL 的模塊。一開始有試過，可是1）下面很難分佈式 2）代碼太爛很難改。魔改的話，半年能作；可是長期的維護成本更高。重作不麻煩，都重構了三次了。這裏用 Go 比用 C/C++/Rust 重構更方便。

一開始只想作 F1只作sql，和 CockroachDB 合做，後來他們往sql這邊作，這邊就只能往storage 作

挖了 Rust core team 的兩我的。rust 很難招人，通常是招 C++的人而後轉rust，他們會以爲不少腦殼裏的約定編譯器幫你搞定了。

不要低估造工業級輪子的難度。用 grpc，raft，rocksdb的好處是，若是業界有新的進展，會直接讓使用者收益。

Chunk (region) split 作了兩個月，merge 作了三年。merge 作了形式化證實。

Tech 趨勢

爲何是如今？

1. hardware
2. Hot / cold data -> warm data
3. Log is the new database

Everything is pluggable , 頂層 api 不變，下面即插即用可替換

Distributed Transaction

• 2PC is the only option
• challenges: reduce round-trips

Multi-tenancy achieved by kubernetes

中國 Biz Trend

1. 中國速度，說上就得上
2. 對新技術服務賦能業務的指望更高。二三線城市的公司或者非BAT用新技術與巨頭鬥爭。必須可以解決使用者的技術焦慮。
3. 基礎軟件人才儲備逐漸變強。P產能CAP 對技術 content marketing 作了不少貢獻。
4. 一些核心場景（銀行核心系統）勇於使用國產技術。
5. PingCAP路徑：開源（互聯網/社區） <-> 商業化

本文首發於硅谷io