很開心在這么冷的天和大家相聚在熟悉的 3W 咖啡聊大數(shù)據(jù)，感謝北京小伙伴踩著冰渣子來參加本場大數(shù)據(jù)為主題的 D-Day 活動。此次沙龍由 SegmentFault 家 Adele 主持，這一次選擇了一個相對陌生的主題，但仍然吸引了很多對大數(shù)據(jù)感興趣的觀眾，不少業(yè)內(nèi)人士也紛紛趕到現(xiàn)場向大咖提問。

Adele 簡單介紹了 SegmentFault 的成長歷程、行業(yè)愿景，產(chǎn)品特性，以及我們舉辦 D-Day 線下技術(shù)沙龍的愿景——讓當(dāng)?shù)氐拈_發(fā)者，開發(fā)者和大牛之間有面對面的交流機會的愿景后，馬上進入分享環(huán)節(jié)。

現(xiàn)場回顧

第一位分享嘉賓是個推技術(shù)總監(jiān)袁凱，分享的議題是《個推 Spark 應(yīng)用與實踐》，主要內(nèi)容包括 Spark 簡介，為什么選擇 Spark，以及 Spark 在個推的應(yīng)用實踐：

• 個推數(shù)據(jù)處理架構(gòu)

• Spark Streaming 部署情況

• 應(yīng)用 Spark 的業(yè)務(wù)舉例

• Spark Streaming 實現(xiàn)熱力圖

第二位嘉賓是 @藍海訊通OneAPM 大數(shù)據(jù)架構(gòu)師劉麒贇，劉老師分享的議題是《大數(shù)據(jù)實時分析利器 Druid 的應(yīng)用》。不光講了選擇 Druid 的背景，Druid 的基本介紹，以及對 Durid 的展望，還舉例說明了 OneAPM 目前基于 Druid 的應(yīng)用：

• 利用 Druid 存儲查詢 Saas 數(shù)據(jù)

• OneAPM Druid 集群概況、集群拓撲

• OneAPM 金字塔結(jié)構(gòu)的 Druid DateSources

• OneAPM Druid 集群監(jiān)控方案

中場休息結(jié)束后，接下來為大家分享的嘉賓是 @友盟 數(shù)據(jù)平臺架構(gòu)師展一楠，議題為《友盟 Spark 和 Elasticsearch 實踐》。簡單介紹什么是 Elasticsearch，Es的優(yōu)點，局限，友盟 Es 使用情況后，展老師還結(jié)合友盟實例進行分析，包括：

• 友盟 Hadoop & Spark 使用情況

• 友盟使用 Spark 的一點不太明顯的原因：函數(shù)式編程

• Spark 與 Es 在技術(shù)上結(jié)合解決的問題

• 使用搜索引擎后，可能是給自己挖坑

本場最后一位分享的嘉賓是小米公司研發(fā)架構(gòu)師，負責(zé)小米廣告平臺的架構(gòu)和數(shù)據(jù)的歐陽辰，這一次分享議題是《小米大數(shù)據(jù)技術(shù)小實踐》，關(guān)鍵詞為小米、大數(shù)據(jù)、技術(shù)小實踐，比如：

• 小米大數(shù)據(jù)技術(shù)框架、大數(shù)據(jù)應(yīng)用

• 為何青睞 HBase，HBase 在小米的改進，如何從 MyAQL 平滑遷移到 HBase

• 小米廣告的實時統(tǒng)計

圓桌環(huán)節(jié)

四位嘉賓演講結(jié)束后是圓桌環(huán)節(jié)，本次圓桌由小米公司研發(fā)架構(gòu)師歐陽辰主持，現(xiàn)場來了很多專業(yè)的觀眾，就平臺架構(gòu)選型及個人使用過程的疑問和嘉賓們進行討論交流。圓桌結(jié)束后有些聽眾意猶未盡，紛紛找嘉賓老師私聊。此次 D-Day 足以見開發(fā)者們對大數(shù)據(jù)這一前沿領(lǐng)域技術(shù)的興趣。后期 SegmentFault D-Day 會對每年前沿技術(shù)保持關(guān)注，為大家?guī)砀嘤腥さ募夹g(shù)交流活動。

本場 D-Day 結(jié)束，馬上就要 12 月了，希望大家?guī)е?D-Day 上 get 的新知識，進入全新的一個月。

干貨已出↓↓↓

現(xiàn)場干貨整理

嘉賓 Slides：

• 袁凱《個推Spark應(yīng)用實踐》

• 劉麒贇《大數(shù)據(jù)實時分析利器Druid的應(yīng)用》

• 展一楠《友盟Spark和Elasticsearch實踐》

• 歐陽辰《小米大數(shù)據(jù)的技術(shù)小實踐》

嘉賓現(xiàn)場速記：

• 袁凱《個推Spark應(yīng)用實踐》

• 劉麒贇《大數(shù)據(jù)實時分析利器Druid的應(yīng)用》

• 展一楠《友盟Spark和Elasticsearch實踐》

• 歐陽辰《小米大數(shù)據(jù)的技術(shù)小實踐》

另有現(xiàn)場活動照片，可以看 這里

下節(jié)預(yù)告

下一場「SegmentFault D-Day 北京：iOS」，3W Coffee 老地方，不見不散

總結(jié)

以上是生活随笔為你收集整理的SegmentFault D-Day 北京：大数据的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。