點擊上方「開源社」關注咱們apache
各位 DolphinScheduler 和 Pulsar 社區的小夥伴們,Apache DolphinScheduler x Pulsar 在線 Meetup 來啦!
微信
![](http://static.javashuo.com/static/loading.gif)
大數據任務調度、消息流的訂閱與分發都是大數據建設中極其重要的 「基礎設施」。高穩定高可用是對基礎設施的基本要求,在這樣的背景下,涌現了不少優秀的開源項目。架構
以 Apache 軟件基金會下的開源項目 Apache DolphinScheduler(Incubating)、Apache Pulsar 爲表明,DolphinScheduler 目前已經有近 400 家公司使用,120 多位社區貢獻者,7 個微信用戶羣,Pulsar 社區更是有 300 多位貢獻者的大社區。app
更可喜的是,這 2 個項目均在中國有大量的開發者,這也會在分佈式工做流任務調度、分佈式消息流平臺兩個方向給廣大的大數據用戶提供更好的交流空間和幫助。編輯器
本次在線 Meetup,咱們也有幸邀請到了 DolphinScheduler、Pulsar 兩個開源項目的開發者與實踐者來分享他們的最佳經驗。分佈式
關於 Apache DolphinScheduler:函數
Apache DolphinScheduler(Incubating) 是一個分佈式去中心化、易擴展的可視化工做流任務調度系統,致力於解決數據處理流程中錯綜複雜的依賴關係,使調度系統在大數據處理流程中開箱即用。DolphinScheduler 源於易觀,目前已捐贈給 Apache 軟件基金會,正在進行孵化中,預計明年初提請畢業。性能
🔗 官網:https://dolphinscheduler.apache.org大數據
關於 Apache Pulsar:flex
Apache Pulsar 是 Apache 軟件基金會頂級項目,是下一代雲原生分佈式消息流平臺,集消息、存儲、輕量化函數式計算爲一體。該系統源於Yahoo,最初在 Yahoo 內部開發和部署,支持 Yahoo 應用服務平臺 140 萬個主題,日處理超過 1000 億條消息。Pulsar 於 2016 年由 Yahoo 開源並捐贈給 Apache 軟件基金會進行孵化,2018 年成爲 Apache 軟件基金會頂級項目。Pulsar 採用計算與存儲分離的分層架構設計,支持多租戶、持久化存儲、多機房跨區域數據複製,具備強一致性、高吞吐、低延時以及高可擴展流數據存儲特性。
🔗 官網:http://pulsar.apache.org
🕙 活動時間:9 月 5 日,週六下午2點
📅 分享日程:
時間 | 題目 |
14:00 - 14:40 | 《 Introduction to Apache Pulsar》 |
14:40 - 15:20 | 《DolphinScheduler 與工業互聯網平臺 xIn3Plat 牽手之路》 |
15:20 - 16:00 | 《BIGO 在 Apache Pulsar 上的實踐》 |
16:00 - 16:40 | 《DolphinScheduler 功能深度解析》 |
16:40 - 17:00 | 問答環節與自由討論 |
🎙️ 議題詳情
>>> Introduction to Apache Pulsar
Apache Pulsar 是 Apache 軟件基金會頂級項目,是下一代雲原生分佈式消息流平臺,集消息、存儲、輕量化函數式計算爲一體。Pulsar 於 2016 年由 Yahoo 開源並捐贈給 Apache 軟件基金會進行孵化,2018 年成爲Apache 軟件基金會頂級項目。
Pulsar 採用計算與存儲分離的分層架構設計,支持多租戶、持久化存儲、多機房跨區域數據複製,具備強一致性、高吞吐以及低延時的高可擴展流數據存儲特性。本次分享將介紹 Apache Pulsar 的功能特性,及社區參與、將來發展等內容。
>>> DolphinScheduler 與工業互聯網平臺 xIn3Plat 牽手之路
介紹如何將 DolphinScheduler 融入寶信軟件 xIn3Plat 所作的功能加強和適應性改造,包括:DolphinScheduler 在多數據源集成、並行任務控制、審計告警、插件擴展性等方面的關鍵特性;以及咱們後續的社區參與計劃及將來功能規劃,與社區一塊兒推進 DolphinScheduler 的發展。
>>> BIGO 在 Apache Pulsar 上的實踐
主要介紹 BIGO 引入 Pulsar 的初衷、Pulsar 性能調優上的實踐,以及 Flink 與 Pulsar 結合在 BIGO 實時數據處理上的應用。
鮑亮,易觀大數據平臺專家、DolphinScheduler PPMC
重點分享 DolphinScheduler 關於無中心架構的容錯設計,工做流及任務狀態切換、任務組件的功能設計以及版本升級的兼容設計以及您可能從未注意到的高級功能等
本次活動,特別感謝開源社、SegmentFault 、示說網的大力支持。目前咱們已開啓報名,活動開始前會在羣內發佈直播地址,歡迎掃碼入羣,與社區大咖共同交流!
咱們會在羣內分享直播連接,記得加入哦!
開源社簡介
開源社是由國內外支持開源的企業,社區及我的,依「貢獻,共識,共治」原則,所組織的廠商中立、純志願者、非營利的開源聯盟,旨在共創健康可持續發展的開源生態體系,並推進中國開源社區成爲全球開源軟件的積極參與及貢獻者。咱們專一於開源治理、國際接軌、社區發展和開源項目。
相關閱讀 | Related Reading
2020 中國開源年會(COSCon'20)再啓程:開源向善(Open Source for Good)
「開源是世界的」關於所謂「開源斷供」咱們有話說
Apache Flink 李鈺:「作中文社區首先最須要解決的問題,是把入門的門檻下降」
![](http://static.javashuo.com/static/loading.gif)
本文分享自微信公衆號 - 開源社(kaiyuanshe)。
若有侵權,請聯繫 support@oschina.cn 刪除。
本文參與「OSC源創計劃」,歡迎正在閱讀的你也加入,一塊兒分享。