華爲宣佈開源數據虛擬化引擎 openLooKeng,可用於改善大數據的易用性

openLooKeng
技術編輯:徐九丨發自 思否編輯部git

近日,華爲正式宣佈開源數據虛擬化引擎 openLooKeng,其開源社區官網也同步上線。資料顯示,2019 年 11 月 19 日,華爲宣佈開源數據虛擬化引擎 HetuEngine(開源版本的 HetuEngine 叫 openHetu),如今,openHetu 正式改名爲 openLooKeng,HetuEngine 改名爲 LooKengEngine。github

高性能數據虛擬化引擎

openLooKeng 是一款開源的高性能數據虛擬化引擎。提供統一SQL接口,具有跨數據源/數據中心分析能力以及面向交互式、批、流等融合查詢場景。同時加強了前置調度、跨源索引、動態過濾、跨源協同、水平拓展等能力。segmentfault

隨着大數據技術的應用和發展,數據種類愈來愈多,數據分佈愈來愈廣,查詢場景也愈來愈複雜,這使得大數據使用更加困難。爲了改善大數據的易用性,華爲發起數據虛擬化引擎openLooKeng開源項目,旨在解決上述問題:安全

  • 統一SQL接口訪問多種數據源
  • 免數據搬遷,在數據所在地對數據進行處理,而且支持跨數據中心、跨雲處理
  • 面向交互式、批、流等融合查詢的場景(第一個版本支持交互式查詢場景)

此外,該項目還提供了Coordinator AA高可靠、可擴展的數據源connector框架等能力,讓用戶及大數據解決方案夥伴更方便的使用openLooKeng。框架

openLooKeng使用了業界著名的開源SQL引擎Presto來提供交互式查詢分析基礎能力,並繼續在融合場景查詢、跨數據中心/雲、數據源擴展、性能、可靠性、安全性等方面發展,讓數據治理、使用更簡單。微服務

做爲開源社區,openLooKeng開源項目採用商業友好的Apache License 2.0發行許可證,讓開發者、用戶和夥伴使用更自由,並期待更多大數據領域的開發者參與到社區,共建、共享,共同推進社區的繁榮發展。佈局

openLookeng社區主頁:
https://openlookeng.io
openLookeng代碼託管地址:
https://gitee.com/openlookeng
https://github.com/openlookeng
openLooKeng REST接口說明:
https://www.bookstack.cn/read...

華爲的開源佈局

國際主流開源基金會的頂級成員:Linux基金會的白金會員、Apache基金會的白金贊助方、OpenStack基金會的白金會員、Eclipse基金會的戰略會員。性能

開源社區/項目的貢獻者:華爲目前在主流開源社區中擁200多個TSC、PMC、PTL、Maintainer、Committer等席位,以及十多個董事席位服務於各開源項目。在全球第一大社區Linux內核社區中,華爲綜合貢獻全球排名第四;雲原生社區CNCF,華爲綜合貢獻全球排名第五;Docker全球排名第5。學習

經過開源openEuler(Linux 發行版)、Mindspore(全場景深度學習框架)、SODA(智能開放的數據自治平臺)、Apache CarbonData(大數據)、Apache微服務項目ServiceComb、KubeEdge(邊緣計算)、Volcano(高性能調度引擎)等等,逐步把華爲長期投資和積累的大量基礎軟件能力,不斷完善並逐步貢獻到開源社區中。大數據

csegmentfault 思否

相關文章
相關標籤/搜索