SegmentFault D-Day 北京:大数据
很開心在這么冷的天和大家相聚在熟悉的 3W 咖啡聊大數據,感謝北京小伙伴踩著冰渣子來參加本場大數據為主題的 D-Day 活動。此次沙龍由 SegmentFault 家 Adele 主持,這一次選擇了一個相對陌生的主題,但仍然吸引了很多對大數據感興趣的觀眾,不少業內人士也紛紛趕到現場向大咖提問。
Adele 簡單介紹了 SegmentFault 的成長歷程、行業愿景,產品特性,以及我們舉辦 D-Day 線下技術沙龍的愿景——讓當地的開發者,開發者和大牛之間有面對面的交流機會的愿景后,馬上進入分享環節。
現場回顧
第一位分享嘉賓是個推技術總監袁凱,分享的議題是《個推 Spark 應用與實踐》,主要內容包括 Spark 簡介,為什么選擇 Spark,以及 Spark 在個推的應用實踐:
個推數據處理架構
Spark Streaming 部署情況
應用 Spark 的業務舉例
Spark Streaming 實現熱力圖
第二位嘉賓是 @藍海訊通OneAPM 大數據架構師劉麒贇,劉老師分享的議題是《大數據實時分析利器 Druid 的應用》。不光講了選擇 Druid 的背景,Druid 的基本介紹,以及對 Durid 的展望,還舉例說明了 OneAPM 目前基于 Druid 的應用:
利用 Druid 存儲查詢 Saas 數據
OneAPM Druid 集群概況、集群拓撲
OneAPM 金字塔結構的 Druid DateSources
OneAPM Druid 集群監控方案
中場休息結束后,接下來為大家分享的嘉賓是 @友盟 數據平臺架構師展一楠,議題為《友盟 Spark 和 Elasticsearch 實踐》。簡單介紹什么是 Elasticsearch,Es的優點,局限,友盟 Es 使用情況后,展老師還結合友盟實例進行分析,包括:
友盟 Hadoop & Spark 使用情況
友盟使用 Spark 的一點不太明顯的原因:函數式編程
Spark 與 Es 在技術上結合解決的問題
使用搜索引擎后,可能是給自己挖坑
本場最后一位分享的嘉賓是小米公司研發架構師,負責小米廣告平臺的架構和數據的歐陽辰,這一次分享議題是《小米大數據技術小實踐》,關鍵詞為小米、大數據、技術小實踐,比如:
小米大數據技術框架、大數據應用
為何青睞 HBase,HBase 在小米的改進,如何從 MyAQL 平滑遷移到 HBase
小米廣告的實時統計
圓桌環節
四位嘉賓演講結束后是圓桌環節,本次圓桌由小米公司研發架構師歐陽辰主持,現場來了很多專業的觀眾,就平臺架構選型及個人使用過程的疑問和嘉賓們進行討論交流。圓桌結束后有些聽眾意猶未盡,紛紛找嘉賓老師私聊。此次 D-Day 足以見開發者們對大數據這一前沿領域技術的興趣。后期 SegmentFault D-Day 會對每年前沿技術保持關注,為大家帶來更多有趣的技術交流活動。
本場 D-Day 結束,馬上就要 12 月了,希望大家帶著 D-Day 上 get 的新知識,進入全新的一個月。
干貨已出↓↓↓
現場干貨整理
嘉賓 Slides:
袁凱《個推Spark應用實踐》
劉麒贇《大數據實時分析利器Druid的應用》
展一楠《友盟Spark和Elasticsearch實踐》
歐陽辰《小米大數據的技術小實踐》
嘉賓現場速記:
袁凱《個推Spark應用實踐》
劉麒贇《大數據實時分析利器Druid的應用》
展一楠《友盟Spark和Elasticsearch實踐》
歐陽辰《小米大數據的技術小實踐》
另有現場活動照片,可以看 這里
下節預告
下一場「SegmentFault D-Day 北京:iOS」,3W Coffee 老地方,不見不散
總結
以上是生活随笔為你收集整理的SegmentFault D-Day 北京:大数据的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: jquery实现抽奖系统
- 下一篇: 20135310陈巧然 20135305