洞見技術前沿 阿里雲全明星陣容亮相DTCC 2019html
5月8日-10日,國內最具影響力的數據庫技術行業會議——DTCC 2019在京召開。做爲DTCC的老朋友和全球領先的雲計算廠商,阿里雲數據庫團隊受邀參加本次技術盛會,不只派出了重量級嘉賓陣容,由數據庫產品事業部總負責人李飛飛博士領銜,還爲廣大數據庫業內人士和行業用戶奉上了8場精彩議題。分別就雲原生數據庫、新一代自研分析型數據庫、分佈式數據庫、時序數據庫、圖數據庫等技術話題,展開深刻討論,分享最佳實戰經驗,充分展現了咱們在數據庫全域佈局的技術能力。mysql
阿里雲數據庫產品事業部總負責人李飛飛博士(花名:飛刀)redis
同時,李飛飛博士還做爲DTCC大會的專家顧問,把握數據技術的主題內容與方向。sql
阿里雲智能數據庫產品事業部研究員林亮(花名:意博)數據庫
大會總參會人數4000+,參會人員普遍,覆蓋了來自金融、政府、醫藥、零售、交通等行業的CIO/CTO/數據庫開發者;緩存
內容+直播回顧:https://yq.aliyun.com/articles/704438安全
POLARDB獲選2019中國數據庫年度最佳創新產品服務器
在DTCC 2019上,阿里雲自研雲原生數據庫POLARDB獲選「年度最佳創新產品」。網絡
阿里雲數據庫產品總監曹偉架構
阿里雲數據庫產品總監曹偉表示:「雲原生數據庫自然擁有云計算的彈性能力,同時兼具開源數據庫簡潔易用、開放的特色,以及傳統數據庫處理性能的優點,POLARDB將更好地幫助大企業輕鬆實現上雲,讓企業更專一於業務創新。」
查看詳情:https://yq.aliyun.com/articles/702310
阿里雲數據庫產品媒體發佈會 POLARDB發佈重大更新
5月21日,數據庫新品發佈會順利在京召開,現場近40家媒體,以及分析師、客戶和合做夥伴到場。發佈會上PolarDB發佈重大更新,幫助企業一鍵遷移傳統數據庫,將線下的MySQL、PostgreSQL和Oracle等數據庫輕鬆上雲,最快數小時內遷移完成。
同時,由客戶銀泰百貨和合做夥伴東方龍馬現場分享了與阿里雲合做的最佳實踐,合做夥伴東方龍馬在傳統線下領域具備很強的標杆效果,這次發佈會對傳統數據庫上雲起到了很大的放大效應和影響做用。
新聞稿《阿里雲PolarDB發佈重大更新:支持Oracle等數據庫一鍵遷移上雲》上線近百家核心IT/門戶/垂直媒體渠道,包括36氪、澎湃新聞、新浪、國際在線、搜狐、騰訊等。
查看詳情:https://yq.aliyun.com/articles/703158
Percona Live 2019:擁抱開源 AliSQL品牌升級
當地時間5月28日-30日,MySQL領域規模最大的會議Percona Live在美國Austin召開,來自阿里雲數據庫產品事業部的印風得到MySQL Community Awards 2019 我的獎,以表彰其對MySQL社區作出的長期貢獻。印風的獲獎是繼阿里雲去年得到「MySQL社區公司貢獻獎」以後再次獲得MySQL社區的承認。阿里雲數據庫積極參與和豐富MySQL的生態,將內部的技術經過雲服務和開源的方式分享。
數據庫團隊共分享了8個議題,主要內容覆蓋兩大部分,一是自研產品POLARDB及其重要功能Parallel Query; 二是開源部分,包括AliSQL對MySQL社區的貢獻、以及在RDS產品層面的創新,主要傳遞AliSQL品牌升級,阿里雲數據庫擁抱開源的計劃,並解讀集團多年業務應用場景。
查看詳情:https://yq.aliyun.com/articles/703801
企業級雲災備系列發佈會&沙龍(5.27-5.31)
5月27日-31日,《企業級雲災備解決方案》系列發佈會分別經過北京、深圳、重慶三場活動,分享從網絡、存儲、應用到數據庫的企業級雲災備解決方案。數據庫團隊主要分享雲時代的數據庫新容災架構,以及混合雲下數據庫容災備份最佳實踐。發佈會現場演示了「拔掉數據庫電源」,10秒後經過業務容災到阿里雲杭州Region後,業務恢復(其中該容災方案中,經過DTS實現RPO:0,RTO:1秒);
查看詳情: https://yq.aliyun.com/articles/704751
阿里雲數據庫研究成果連續2次入選國際頂會SIGMOD
SIGMOD是數據庫領域的頂級會議,全球頂級科技公司及學術機構都會參與,堪稱數據庫領域的"奧林匹克",入選論文表明瞭數據庫領域的最高水平。
阿里雲數據庫入選論文《X-Engine: An Optimized Storage Engine for Large-scale E-Commerce Transaction Processing》主要介紹了面向大規模流量場景設計的自研存儲引擎X-Engine。SIGMOD委員會點評:「X-Engine具有比同類系統更好的性能和效率,且在實際生產環境中獲得了完善的測試和考驗。「
連續兩年入選SIGMOD在國內企業中尚屬首次,體現了阿里雲自研數據庫技術的能力,同時也是中國企業在數據庫核心系統內核方向的論文第一次被SIGMOD收錄。
查看詳情:https://mp.weixin.qq.com/s/ThMLch-b0PN5avCrElOciQ
阿里雲峯會新加坡站 (5月30日)
新加坡峯會上,阿里雲面向全球企業發佈了10多款新產品和功能,數據庫產品事業部在主論壇發佈了POALRDB for Oracle和GraphDB,並在展區對這兩款數據庫進行了展現,助力企業完成基礎設施的雲化、核心技術互聯網化、應用數據智能化。本次大會是產品國際化的重要發聲渠道,輻射東南亞、香港區域,提高了阿里雲數據庫產品的國際影響力。
查看詳情:http://www.ctoutiao.com/1851993.html
POLARDB
· 支持一鍵升級 RDS MySQL 到 POLARDB
POLARDB 徹底兼容 MySQL,能夠直接替換 MySQL,但遷移過程卻較爲複雜。爲使RDS用戶比較方便地使用POLARDB,現推出了一鍵升級的功能,用戶能夠基於RDS建立一個增量同步中的POLARDB,利用原生複製技術完成在線熱遷移,整個過程能夠確保數據0丟失,分鐘級的切換時間,而且支持7天內隨時回滾,免除後顧之憂。
查看詳情:https://help.aliyun.com/document_detail/121582.htm
RDS
· RDS for MySQL 8.0發佈
5月29日,阿里雲RDS for MySQL 8.0正式上線,使得阿里雲成爲緊跟社區步伐,發佈MySQL最新版本的雲廠商。RDS for MySQL 8.0 產品是阿里雲推出的 MySQL 系列雲產品之一,使用徹底兼容 MySQL 8.0 的阿里雲 AliSQL 8.0 分支,不只有2倍以上性能提高,還發布了SQL窗口函數、JSON擴展語法等企業級新功能。
除了官方在 MySQL 8.0 推出的全新功能外,AliSQL 沉澱了許多在 阿里巴巴集團電商業務和雲上幾十萬客戶在使用 MySQL 過程當中遇到的問題和需求,以此來加固AliSQL, 提高 AliSQL 的性能和穩定性。
生態與工具
· 數據傳輸服務DTS上線新版訂閱功能
新版訂閱新增功能以下:
1.支持經過建立多個消費組實現多下游消費,相對老版本大大下降用戶使用成本。
2.支持訂閱自建MySQL數據庫,爲自建數據庫用戶訂閱數據提供更多的便利。
3.在支持經典網絡的基礎上,新增了專有網絡的支持。用戶能夠經過專有網絡訂閱消費數據,以得到更低的網絡延遲和更高的安全性。
4.支持Kafka生態,經過使用Kafka Client用戶能夠直接消費數據訂閱通道中的數據。
· 數據傳輸服務DTS支持MySQL 8.0
數據傳輸DTS上線MySQL8.0做爲數據源和目標的結構、全量、增量遷移、同步功能。上線MySQL8.0的訂閱功能,MySQL8.0的訂閱基於新版本的訂閱功能實現。
· 數據傳輸服務DTS上線雲Redis單實例做爲數據源的同步功能
在原有支持自建Redis做爲數據源的同步功能基礎上,增長支持雲redis單實例做爲數據源的同步功能,可實現雲redis單實例到雲redis單實例、雲redis讀寫分離實例、雲redis cluster、用戶自建ECS Redis單實例、用戶自建ECS redis cluster、用戶專線接入的redis單實例和Redis cluster。
· 數據傳輸服務DTS支持ADB 3.0
數據傳輸服務DTS支持MySQL到ADB3.0的結構遷移、全量、增量遷移和同步功能,實現用戶方將MySQL數據同步到ADB3.0作實時分析的場景。
· 混合雲數據庫管理 HDM 上線MySQL 性能快照
混合雲數據庫管理 HDM支持當MySQL的活躍會話數量觸發告警閾值後,自動產生性能快照,保存異常現場,方便用戶排查數據庫異常。
· 混合雲數據庫管理 HDM 支持Redis 緩存分析
混合雲數據庫管理 HDM 支持Redis緩存分析,確認Key分佈狀況,減小由於Key傾斜引起的內存不足、性能降低等問題。
· 混合雲數據庫管理 HDM 支持Redis 會話管理
混合雲數據庫管理 HDM 支持Redis會話管理,幫助用戶直觀的查看正在執行的會話,快速確認會話的來源,並支持直接終止異常會話。
· 數據管理DMS我的版發佈全球化管理、MySQL8.0支持和ADB 3.0支持
全球化管理髮布後,用戶經過控制檯能夠看到全球各個地域的數據庫實例列表,在列表直接進行數據庫登陸操做,不須要再區分所屬地域進行獨立地址登陸使用。並支持在控制檯查看全球全部區域實例的操做日誌進行相關審計。
新增ECS自建數據庫、RDS數據庫MySQL8.0版本的支持,用戶能夠經過DMS進行可視化的數據庫表結構、表數據的管理。
新增ADB3.0數據庫類型的支持,用戶能夠經過DMS進行可視化的數據庫表結構、表數據的管理。
· 數據管理DMS企業版售賣規格調整
本次新增4個大規格,全面調整已有7個規格放寬實例數的限制,方便用戶以更低的成原本使用本產品。幫助用戶快速構建簡單易用、高數據安全、高變動安全、高研發效率的數據庫DevOps平臺。
· 數據管理DMS企業版實例錄入OpenAPI新增ECS自建、VPC專線實例的支持
擴展原有OpenAPI新增實例來源爲ECS自建、VPC專線的支持,方便用戶更高效、自動化完成相關數據庫資源的統一錄入管理使用。
· 數據管理DMS企業版提高不鎖表結構變動能力
本次提供不鎖表結構變動開關選項,幫助用戶可更靈活選擇須要的執行方式,針對MySQL源上OnlineDDL行爲會形成的主備延遲問題,能夠經過產品自研提供的不鎖表結構變動優先的方式來進行規避。
· 跨數據庫查詢DSQL新增POLARDB數據庫類型的支持
在原有MySQL、SQL Server、PostgreSQL、Redis、DRDS幾個數據庫類型可完成的跨實例、跨庫join查詢的基礎上,本次新增了POLARDB與已支持數據源之間的join查詢支持,方便用戶經過console或者應用程序,在不一樣數據源之間作快速、高效、在線的數據join分析。
數字中國行-數據庫技術沙龍(重慶站)
2019年5月28日下午,阿里雲數據庫技術沙龍(重慶站)在兩江新區互聯網產業園阿里雲創新中心(重慶)舉行。本次沙龍邀請了四位著名的阿里雲產品專家圍繞雲數據庫技術進行分享,吸引了近百名參與者。活動由四個主題分享構成,分別是《阿里雲數據庫的演變與最佳實踐》、《POLARDB | 劃時代的雲原生數據庫》、《阿里雲NoSQL數據庫,助力企業構建敏捷架構》,《分析型數據庫最佳實踐》,主講人經過大量實例向你們生動講解了雲數據庫技術。
查看詳情:https://mp.weixin.qq.com/s/ddJcgifro8MDXa-fijB1vw
客戶案例:玖富集團
玖富集團是中國移動互聯網金融綜合服務平臺,成立於 2006 年,基於移動互聯網和大數據技術爲用戶提供普惠金融服務。目前玖富集團旗下品牌累計註冊用戶已經突破 6000 萬,連續兩年被國際四大審計機構德勤評爲「中國高科技高增加企業 50 強企業「。
隨着玖富集團旗下的金融風控業務的快速發展,如何爲業務提供快捷高效的數據服務成了客戶的一大挑戰,理想中的數據庫既可以長期存儲龐大的歷史數據,還能夠實現億級數據的高效查詢,而客戶目前使用的傳統 MySQL面臨存儲空間不足的問題,同時龐大的業務查詢量也致使數據庫性能降低、查詢低效,對客戶業務的順利發展形成了必定的影響。
爲解決客戶痛點,首先須要統一各個業務系統調用爬蟲服務的入口,以免各系統與爬蟲系統、風控決策流系統分別進行數據交互。在阿里雲的協助下,玖富集團構建了爬蟲埋點服務系統,由前置服務統一調用和獲取爬蟲數據,並提供給不一樣的業務系統,大大提高了業務查詢效率。
同時,爲了確保在多個系統併發調用爬蟲系統時的性能,玖富集團使用了阿里雲 POLARDB 數據庫,依靠 POLARDB 強大的計算能力,經過接口的方式快捷高效地爲衆多業務系統提供相關的數據,順利解決了龐大數據查詢慢的問題。
此外,客戶還經過 POLARDB 靈活實現了只讀實例的擴展,很好地提高了業務數據的存儲能力,完美解決了金融風控龐大數據存儲和計算難的痛點。
目前玖富集團在阿里雲POLARDB中的數據已經達到 20 TB+ ,其中單表最大已達1TB,並且還在快速增長中。阿里雲 POLARDB經過彈性自適應增加、自帶讀寫分離的高可用服務和高併發查詢能力,完美解決了玖富集團金融風控龐大數據存儲和計算的痛點,爲客戶提供了高效可靠的服務,助力客戶創造更多的業務價值。
總體風控系統改造架構圖
客戶案例:數據處理類遷移上雲
客戶名稱:某數字營銷有限公司
原 IT 架構數據存儲方面,是自建 SQL Server 數據庫放在 Linux 系統的容器中,致使數據更新慢,響應時間長,工做效率低下,數據時效性下降,影響業務開展。如今的IDC 機房,針對安全方面部署少,常常被攻擊篡改網站,人工防禦運維成本高,成效低,一旦被攻擊,損失慘重。後續計劃建大數據平臺,線下機房性能適配性低,可拓展性低,投入高收益低。
· 數據存儲:用雲上的 RDS ,進行數據存儲和數據同步,不一樣的 RDS 進行業務區分。按照客戶的業務需求,結合阿里雲現有的產品功能,將放置在線下Linux 系統容器中的 SQL Server 數據庫,先用 MariaDB 清洗,而後用 MongoOB 來進行數據同步。基於兩個數據庫,再配置一個 DBS ,方便進行數據備份。
· 安所有署:在兩臺 WEB服務器使用了防篡改版的安騎士,而且開通了按量付費的 WAF,進行安全防禦。
· 後期計劃: RabbitMQ 後期計劃開展建設大數據平臺,預計結合客戶的需求,提供完整的架構方案和技術知識。目前客戶是自建的RabbitMQ,後續會協助客戶用使用消息隊列 MQ 一 AMQP ,以及 ARMS 等,以及輿情分析平臺,來助力客戶開展業務。
大幅度提高了數據更新速度,響應時間縮短,提高 IT效率,高效工做,提高數據處理的速度。
有效保護業務安全,下降安全緊急事件帶來的業務損失,提升運維的工做效率,線上部署安全產品成本可控實用性高。
本文做者:七幕
本文爲雲棲社區原創內容,未經容許不得轉載。