SegmentFault D-Day 北京：大數據

很開心在這麼冷的天和你們相聚在熟悉的 3W 咖啡聊大數據，感謝北京小夥伴踩着冰渣子來參加本場大數據爲主題的 D-Day 活動。這次沙龍由 SegmentFault 家 Adele 主持，這一次選擇了一個相對陌生的主題，但仍然吸引了不少對大數據感興趣的觀衆，很多業內人士也紛紛趕到現場向大咖提問。

Adele 簡單介紹了 SegmentFault 的成長曆程、行業願景，產品特性，以及咱們舉辦 D-Day 線下技術沙龍的願景——讓當地的開發者，開發者和大牛之間有面對面的交流機會的願景後，立刻進入分享環節。

現場回顧

第一位分享嘉賓是個推技術總監袁凱，分享的議題是《個推 Spark 應用與實踐》，主要內容包括 Spark 簡介，爲何選擇 Spark，以及 Spark 在個推的應用實踐：

• 個推數據處理架構

• Spark Streaming 部署狀況

• 應用 Spark 的業務舉例

• Spark Streaming 實現熱力圖

第二位嘉賓是 @藍海訊通OneAPM 大數據架構師劉麒贇，劉老師分享的議題是《大數據實時分析利器 Druid 的應用》。不光講了選擇 Druid 的背景，Druid 的基本介紹，以及對 Durid 的展望，還舉例說明了 OneAPM 目前基於 Druid 的應用：

• 利用 Druid 存儲查詢 Saas 數據

• OneAPM Druid 集羣概況、集羣拓撲

• OneAPM 金字塔結構的 Druid DateSources

• OneAPM Druid 集羣監控方案

中場休息結束後，接下來爲你們分享的嘉賓是 @友盟 數據平臺架構師展一楠，議題爲《友盟 Spark 和 Elasticsearch 實踐》。簡單介紹什麼是 Elasticsearch，Es的優勢，侷限，友盟 Es 使用狀況後，展老師還結合友盟實例進行分析，包括：

• 友盟 Hadoop & Spark 使用狀況

• 友盟使用 Spark 的一點不太明顯的緣由：函數式編程

• Spark 與 Es 在技術上結合解決的問題

• 使用搜索引擎後，多是給本身挖坑

本場最後一位分享的嘉賓是小米公司研發架構師，負責小米廣告平臺的架構和數據的歐陽辰，這一次分享議題是《小米大數據技術小實踐》，關鍵詞爲小米、大數據、技術小實踐，好比：

• 小米大數據技術框架、大數據應用

• 爲什麼青睞 HBase，HBase 在小米的改進，如何從 MyAQL 平滑遷移到 HBase

• 小米廣告的實時統計

圓桌環節

四位嘉賓演講結束後是圓桌環節，本次圓桌由小米公司研發架構師歐陽辰主持，現場來了不少專業的觀衆，就平臺架構選型及我的使用過程的疑問和嘉賓們進行討論交流。圓桌結束後有些聽衆意猶未盡，紛紛找嘉賓老師私聊。這次 D-Day 足以見開發者們對大數據這一前沿領域技術的興趣。後期 SegmentFault D-Day 會對每一年前沿技術保持關注，爲你們帶來更多有趣的技術交流活動。

本場 D-Day 結束，立刻就要 12 月了，但願你們帶着 D-Day 上 get 的新知識，進入全新的一個月。

乾貨已出↓↓↓

現場乾貨整理

嘉賓 Slides：

• 袁凱《個推Spark應用實踐》

• 劉麒贇《大數據實時分析利器Druid的應用》

• 展一楠《友盟Spark和Elasticsearch實踐》

• 歐陽辰《小米大數據的技術小實踐》

嘉賓現場速記：

• 袁凱《個推Spark應用實踐》

• 劉麒贇《大數據實時分析利器Druid的應用》

• 展一楠《友盟Spark和Elasticsearch實踐》

• 歐陽辰《小米大數據的技術小實踐》

另有現場活動照片，能夠看 這裏

下節預告

下一場「SegmentFault D-Day 北京：iOS」，3W Coffee 老地方，不見不散