SegmentFault D-Day 北京：大数据

很开心在这么冷的天和大家相聚在熟悉的 3W 咖啡聊大数据，感谢北京小伙伴踩着冰渣子来参加本场大数据为主题的 D-Day 活动。此次沙龙由 SegmentFault 家 Adele 主持，这一次选择了一个相对陌生的主题，但仍然吸引了很多对大数据感兴趣的观众，不少业内人士也纷纷赶到现场向大咖提问。

Adele 简单介绍了 SegmentFault 的成长历程、行业愿景，产品特性，以及我们举办 D-Day 线下技术沙龙的愿景——让当地的开发者，开发者和大牛之间有面对面的交流机会的愿景后，马上进入分享环节。

现场回顾

第一位分享嘉宾是个推技术总监袁凯，分享的议题是《个推 Spark 应用与实践》，主要内容包括 Spark 简介，为什么选择 Spark，以及 Spark 在个推的应用实践：

• 个推数据处理架构

• Spark Streaming 部署情况

• 应用 Spark 的业务举例

• Spark Streaming 实现热力图

第二位嘉宾是 @蓝海讯通OneAPM 大数据架构师刘麒贇，刘老师分享的议题是《大数据实时分析利器 Druid 的应用》。不光讲了选择 Druid 的背景，Druid 的基本介绍，以及对 Durid 的展望，还举例说明了 OneAPM 目前基于 Druid 的应用：

• 利用 Druid 存储查询 Saas 数据

• OneAPM Druid 集群概况、集群拓扑

• OneAPM 金字塔结构的 Druid DateSources

• OneAPM Druid 集群监控方案

中场休息结束后，接下来为大家分享的嘉宾是 @友盟 数据平台架构师展一楠，议题为《友盟 Spark 和 Elasticsearch 实践》。简单介绍什么是 Elasticsearch，Es的优点，局限，友盟 Es 使用情况后，展老师还结合友盟实例进行分析，包括：

• 友盟 Hadoop & Spark 使用情况

• 友盟使用 Spark 的一点不太明显的原因：函数式编程

• Spark 与 Es 在技术上结合解决的问题

• 使用搜索引擎后，可能是给自己挖坑

本场最后一位分享的嘉宾是小米公司研发架构师，负责小米广告平台的架构和数据的欧阳辰，这一次分享议题是《小米大数据技术小实践》，关键词为小米、大数据、技术小实践，比如：

• 小米大数据技术框架、大数据应用

• 为何青睐 HBase，HBase 在小米的改进，如何从 MyAQL 平滑迁移到 HBase

• 小米广告的实时统计

圆桌环节

四位嘉宾演讲结束后是圆桌环节，本次圆桌由小米公司研发架构师欧阳辰主持，现场来了很多专业的观众，就平台架构选型及个人使用过程的疑问和嘉宾们进行讨论交流。圆桌结束后有些听众意犹未尽，纷纷找嘉宾老师私聊。此次 D-Day 足以见开发者们对大数据这一前沿领域技术的兴趣。后期 SegmentFault D-Day 会对每年前沿技术保持关注，为大家带来更多有趣的技术交流活动。

本场 D-Day 结束，马上就要 12 月了，希望大家带着 D-Day 上 get 的新知识，进入全新的一个月。

干货已出↓↓↓

现场干货整理

嘉宾 Slides：

• 袁凯《个推Spark应用实践》

• 刘麒贇《大数据实时分析利器Druid的应用》

• 展一楠《友盟Spark和Elasticsearch实践》

• 欧阳辰《小米大数据的技术小实践》

嘉宾现场速记：

• 袁凯《个推Spark应用实践》

• 刘麒贇《大数据实时分析利器Druid的应用》

• 展一楠《友盟Spark和Elasticsearch实践》

• 欧阳辰《小米大数据的技术小实践》

另有现场活动照片，可以看 这里

下节预告

下一场「SegmentFault D-Day 北京：iOS」，3W Coffee 老地方，不见不散