小红书一直是 Alluxio 的深度用户,特别是在多云机器学习的场景,将 Alluxio 的能力发挥得淋漓尽致,并给小红书的业务带来了强大助力。此次的 AI&Data 技术&串烧沙龙,由 Alluxio 与小红书联合举办,我们将走进小红书,与顶尖的 Infra 技术专家们一起深入交流与探讨Alluxio 的最新实践成果。此外,我们还邀请到了来自运营商和高校重点实验室的技术负责人、学者一同分享Alluxio 在各行业中更广泛的应用,为大家带来更多启发。与此同时,Alluxio 专家也将总结今年核心的技术迭代、分享最新 MLPerf 权威测试结果以及正在进行的技术探索,让您抢先领略 Alluxio 在新一年的无限潜能。
诚邀 AI & Data Infra 相关的技术负责人、架构师、存储开发、运维、研究员、生态合作伙伴等前来参与👏
活动信息
🎄 活动主题:AI&Data 技术&串烧沙龙
🤝 联合主办:Alluxio、小红书
⬆️ 支持社区:DataFun
🕙 活动时间:2024年12月14日(周六)13:30-16:30
👀 活动地点:北京朝阳区安定路中海国际中心B座18层Basic 会议厅
🚇 交通指南:地铁10号线安贞门地铁站A西北口步行130米
沙龙亮点抢先看
主题一:多云统一数据加速 - Alluxio 在小红书的实践
演讲摘要
本次分享内容主要包括基于 Alluxio 分布式缓存系统,如何解决多云场景下专线传输成本贵、数据存储成本高、跨云下载速度慢等问题;并介绍围绕 Alluxio 打造的智能缓存管理服务,保障缓存 100% 命中避免冷读穿透、缓存生命周期管理避免存储空间浪费、缓存加载降级插队保障故障快速恢复、集群平滑缩容等扩展能力。
演讲提纲
✓多云场景面临的挑战;
✓多云统一数据加速架构介绍;
✓Alluxio 在小红书多云场景实践案例;
✓未来规划。
听众收益
✓Alluxio 在多云场景中的实际应用;
✓围绕 Alluxio 打造的智能缓存服务如何解决复杂业务问题。
主题二:Alluxio PDDM(基于策略的数据流转) 在联通的应用
演讲摘要
背景:安全基座与 O 域底座之间的数据同步,是确保全网安全高效运作的重要环节。然而,由于跨 IDC 带宽受限、KDC 无法跨域互信及集群异构等挑战,原有基于本地 HDFS 中转的数据下发方案存在性能低、延迟高及数据泄露风险。
Alluxio PDDM 的引入,通过统一视图与高性能数据流转能力,实现了直接的跨集群数据下发,提升吞吐性能,最高带宽利用率接近 15GB/s。同时,Alluxio 提供丰富的任务管理、校验及容错工具,降低了运维复杂度和成本。此方案显著优化了数据下发效率与安全性,为跨 IDC 提供了更加可靠和高效的数据传输平台。具体详情,敬请期待。
演讲梗概
✓「背景与需求」数据同步面临的挑战:带宽受限、KDC 跨域互信问题、集群异构;
✓「传统方案的不足」本地 HDFS 中转方式导致性能低、延迟高、安全风险大,运维复杂;
✓「Alluxio PDDM 解决方案」提升吞吐性,优化跨集群数据同步效率。降低安全风险,简化运维流程,提供高效的任务管理工具;
✓「成果与价值」数据下发更快、更稳定,安全性更高,运维成本显著降低。
听众收益
✓跨集群数据同步优化思路;
✓提升数据传输效率的实践经验;
✓安全与性能的平衡方案;
✓简化运维与降低成本的策略;
✓Alluxio技术在实际应用中的启发。
主题三:Alluxio 在媒体融合领域的应用
演讲摘要
新闻数据的指数级增长对新闻的高效存储和管理提出了重大挑战。为了解决存算分离模式下新闻文本的存储与访问瓶颈问题,我们提出了一种基于 Alluxio 的新闻文本存储优化方法。首先,利用 Alluxio 对不同存储系统中的新闻文本进行缓存并提供统一命名空间,加速了计算应用的数据访问。
其次,为了解决新闻文本存储在远程场景下所面临的读访问性能瓶颈问题,我们对新闻文本进行了基于目录聚合的合并,并利用最小完美哈希算法对新闻文本元数据构建索引,实现了新闻文本的快速检索。我们为何选择 Alluxio?在新闻文本存储中如何使用与改进?怎样充分测试和验证其功能和性能?具体详情,敬请期待。
演讲梗概
✓在媒体融合领域中,Alluxio 的用武之地
✓中国传媒大学的应用场景——多语言新闻检测分析平台
✓Alluxio 应用于新闻文本的存储优化
听众收益
✓在媒体融合领域,Alluxio 的应用场景
✓如何使用 Alluxio 达成性能优化的目标
主题四:Alluxio AI 存储新范式 - 年终串烧
演讲摘要
Alluxio在2024年技术迭代飞快,从去年年底发布 Alluxio DORA 全新架构及专门针对AI工作负载的高性能数据平台-Alluxio Enterprise AI,到今年年末,平台基于用户需求已经迭代了数个版本。与此同时,在近期的 MLPerf 国际 AI 性能基准评测上,Alluxio 取得出色成绩,我们将围绕"Alluxio在多场景模型训练 I/O 性能"以及"Alluxio 集群可扩展性"方面的测试细节和结果进行深度解读,让大家对 Alluxio 的现有能力有更全面的了解。此外,我们也将从各个行业用户的应用中归纳出典型的应用场景与价值,方便大家参考并带来更多的启发。
演讲梗概
✓2024年新技术迭代总结;
✓最新 MLPerf 权威测试结果解读;
✓典型应用案例。
听众收益
✓了解 Alluxio Enterprise AI 最新功能;
✓了解 Alluxio 在 MLPerf 评测中的测试环境、方法以及结果;
✓了解 Alluxio 的典型应用场景和价值。
👀 Dressing Code 👀
凡是参会者着装带有红色元素,即可领取精美小礼品一份。
**粗体** _斜体_ [链接](http://example.com) `代码` - 列表 > 引用
。你还可以使用@
来通知其他用户。