重磅乾貨免費下載！阿里雲RDS團隊論文被數據庫頂會SIGMOD 2018收錄

ACM SIGMOD數據管理國際會議是由美國計算機協會(ACM) 數據管理專業委員會(SIGMOD)發起、在數據庫領域具備最高學術地位的國際性學術會議。

SIGMOD和另外兩大數據庫會議VLDB、ICDE構成了數據庫領域的三個頂級會議。相對而言，SIGMOD比另外兩個會議的含金量更高，被錄取的難度更大。ACM SIGMOD的論文錄取率是很低的，平均錄取率大約僅爲15%-17%。

來自阿里雲RDS團隊的論文「TcpRT: Instrument and Diagnostic Analysis System for Service Quality of Cloud Databases at Massive Scale in Real-time」 （TcpRT：面向大規模海量雲數據庫的服務質量實時採集與診斷系統）被數據庫頂會SIGMOD 2018收錄。

TcpRT論文介紹了RDS天象系統在雲數據庫SLA數據採集、服務質量指標計算、異常檢測、故障根因分析領域的創新工做，以及在各種雲平臺上大規模部署自動化服務的客戶實踐經驗。

評委評價

I have plenty of experience with manual anomaly detection. That has wasted much time for me at work, so I liked what you described.

如下爲SIGMOD 2018阿里雲入選論文。

下載中文版：https://yq.aliyun.com/attachment/download/?id=5574
下載英文版：https://yq.aliyun.com/attachment/download/?id=5575

簡介

隨着企業上雲趨勢的日益熱化，做爲產業核心組件的數據庫，已成爲各大雲計算公司增加最快的在線服務業務。做爲中國第一大雲數據庫廠商，咱們RDS團隊致力於爲用戶提供穩定的雲數據庫服務。從本質上看，RDS是一個多租戶DBaaS平臺，利用輕量級KVM、Docker鏡像等資源隔離技術將用戶所購買的數據庫實例部署在物理機上，按需分配資源並進行自動升降級，實現一套徹底自動化的智能運維管理。

雲數據庫對客戶業務的穩定性相當重要，所以快速發現雲數據庫性能出現異常，及時定位異常緣由是雲數據庫廠商的一個挑戰。TcpRT是阿里雲數據庫用來監控和診斷數據庫服務質量的一個基礎設施。TcpRT從主機TCP/IP協議棧的壅塞控制採集trace數據，計算數據庫延遲和網絡異常，在後臺流式計算平臺進行大規模實時數據分析和聚合，經過統計指標歷史數據的柯西分佈發現異常點，並經過同一臺主機、交換機、proxy下全部實例一致性趨勢的比例來計算不一樣組件發生異常的機率。

到目前爲止，TcpRT以每秒採集2千萬條原始trace數據、天天后臺處理百億吞吐數據、秒級檢測異常的卓越性能在阿里雲持續穩定運行三年。

本文貢獻

• 提出了一種新的對數據庫服務質量進行採集的方法，基於內核壅塞模塊實現，能夠非侵入性、低代價的採集基於停等協議的關係數據庫的per connection的延遲、帶寬，分析用戶使用數據庫的模型（短鏈接和長鏈接），而且能夠端到端的記錄和量化基礎網絡服務質量對數據庫服務質量的影響，包括丟包率、重傳率。
• 咱們開發了一套對採集的原始數據進行數據清洗、過濾、聚合、分析的流式計算系統，系統能夠作到水平擴展、容錯性、實時性、Exactly Once，具備和其餘大數據平臺例如EMR、MaxCompute進行數據交換的能力
• 咱們提出了一個新的算法對TcpRT數據進行分析，來發現數據庫的服務質量有無異常，而且對異常事件的根因進行定位

會議將於6月10日在美國休斯敦召開，論文也會公開發表，如下是相關信息。
Title：SIGMOD/PODS '18 International Conference on Management of Data
Houston, TX, USA — June 10 - 15, 2018
Pages：1846
Sponsor： SIGMOD ACM Special Interest Group on Management of Data
Publisher：ACM New York, NY, USA
ISBN：978-1-4503-4703-7
Conference：MODInternational Conference on Management of Data

掃碼瞭解阿里雲數據庫

掃碼關注雲棲社區，獲取更多幹貨

阿里雲RDS產品點此瞭解：
https://www.aliyun.com/product/outline/index
阿里雲自研智能雲數據庫POLARDB點此瞭解：
https://www.aliyun.com/product/polardb