流式湖仓增强,Hologres + Flink构建企业级实时数仓

1 月 30 日
阅读 9 分钟
142
2023年12月,由阿里云主办的实时计算闭门会在北京举行,阿里云实时数仓Hologres研发负责人姜伟华现场分享Hologres+Flink构建的企业级实时数仓,实现全链路的数据实时计算、实时写入、实时更新、实时查询。同时,随着流式湖仓的兴起,Hologres除了支持Delta、Hudi等通用湖格式,在今年新增了对Paimon的深度集成,不断拓展...

阿里妈妈Dolphin智能计算引擎基于Flink+Hologres实践

2023-01-11
阅读 6 分钟
377
阿里妈妈数据引擎团队负责广告营销计算引擎Dophin的开发,目前支撑百万级广告主的营销产品,支持万亿级数据毫秒级交互式人群圈选、洞察分析及百亿级数据秒级广告效果分析,同时支持OLAP、实时、离线及AI超融合计算能力,为商家端产品万相台、直通车、超级推荐和达摩盘等营销产品提供极速的数据探索能力。

37手游云平台基于Flink+Hologres大数据建设实践

2022-10-17
阅读 8 分钟
673
本文整理自37手游大数据平台资深开发工程师史飞翔在实时数仓Workshop · 广州站的演讲。主要内容包括:37云平台大数据建设背景37云平台大数据建设方案应用实践未来规划作者:史飞翔 37手游大数据平台资深开发工程师公司介绍37手游是37互娱的子公司,主要负责运营,也就是发行业务。在中国大陆地区37手游以10%占有率仅次于...

菜鸟裹裹万能查:小包裹数据的大革新

2022-10-08
阅读 6 分钟
967
菜鸟寄件业务当前为菜鸟的基础设施建设业务,是用户与【菜鸟】品牌最直接最基本的认知联系。通过与三通一达等巨头快递公司合作,降本增效,数字化、智能化的推动了中国快递行业腾飞。在新的一年里,菜鸟裹裹更是【做物流行业数字化转型的引擎】这一菜鸟大愿景的践行者。目前裹裹寄件日常寄件订单量百万级别,且双十一等...

阿里云云原生实时数仓升级发布,助力企业快速构建一站式实时数仓

2022-09-15
阅读 2 分钟
600
9月14日,阿里云云原生实时数仓升级发布。阿里云计算平台的产品专家分享了实时计算Flink版和Hologres构建企业级一站式实时数仓的核心能力升级及新功能解读。

Hologres揭秘:深度解析高效率分布式查询引擎

2021-06-07
阅读 7 分钟
3.1k
Hologres(中文名交互式分析)是阿里云自研的一站式实时数仓,这个云原生系统融合了实时服务和分析大数据的场景,全面兼容PostgreSQL协议并与大数据生态无缝打通,能用同一套数据架构同时支持实时写入实时查询以及实时离线联邦分析。它的出现简化了业务的架构,与此同时为业务提供实时决策的能力,让大数据发挥出更大的...

小红书推荐大数据在阿里云上的实践

2020-10-16
阅读 5 分钟
1.5k
本篇内容主要分三个部分,在第一部分讲一下实时计算在推荐业务中的使用场景。第二部分讲一下小红书是怎么使用Flink的一些新的功能。第三部分主要是讲一些OLAP的实时分析的场景,以及和阿里云MC-Hologres的合作。

9大训练营免费开营!阿里云大数据团队的独门绝学全在这了!

2020-08-18
阅读 2 分钟
1.3k
小白开发者不知道从哪里入门大数据?入行不久对专业技能一知半解?老板的新项目无力招架?想精进自己的知识体系,多个项目融会贯通?想拜师大数据行业大佬,求其指点一二?······

菜鸟+Hologres=智能物流

2020-08-12
阅读 3 分钟
1.6k
智能物流分析引擎将基于运配网络的各类应用场景集中到了统一的一个技术架构,以此提供强大的吞吐和计算能力。基于原架构的数据处理流程为:Datahub实时采集数据源,包含仓、配、运和订单等数据,实时计算Flink基于流批一体的模式对数据预处理,形成一个以订单为单位,包含订单跟踪事件的宽表,写入存储引擎HBase中,再供...

云原生HSAP系统Hologres产品价值解读

2020-07-31
阅读 8 分钟
1.8k
摘要:企业拥抱数字化转型已成为行业共识,越来越多的企业加快推进数字化转型和升级,数据价值的重要性越加显著。本次分享将由阿里云计算平台-交互式分析团队产品经理李姗姗为大家进行云原生HSAP系统Hologres产品价值解读。主要分享主流实时数仓架构以及其实践的痛点,与云原生HSAP系统创新的价值。演讲嘉宾简介:阿里云...

大数据的下一站是什么?服务/分析一体化(HSAP)

2020-06-19
阅读 6 分钟
2.7k
因为侧重点的不同,传统的数据库可以分为交易型的 OLTP 系统和分析型的 OLAP 系统。随着互联网的发展,数据量出现了指数型的增长,单机的数据库已经不能满足业务的需求。特别是在分析领域,一个查询就可能需要处理很大一部分甚至全量数据,海量数据带来的压力变得尤为迫切。这促成了过去十多年来以 Hadoop 技术开始的大...

数智时代新基石,贾扬清重磅发布新一代云原生数据仓库与数据湖

2020-06-11
阅读 3 分钟
1.6k
6月9日, 在2020阿里云峰会上,阿里巴巴副总裁、阿里云计算平台事业部高级研究员贾扬清宣布推出新一代云原生数据仓库和数据湖解决方案。基于创新的技术架构,新一代云原生数据仓库可支持PB级数据关联分析和实时查询,实现离线、实时、分析、服务的四位一体。同时推出的数据湖解决方案,采用一种存储多种计算理念,基于存...

直播 | 阿里、快手、Databricks、网易云音乐...国内外大数据大佬齐聚一堂要聊啥?

2020-06-05
阅读 3 分钟
2.6k
一线开发者同学一直面临着巨大的学习压力,除了需要解决业务上线后日常神出鬼没的bug与难题,还得面对开源软件不断发版更新导致的措手不及。 于是 黑眼圈日益浓重 稀疏的头发间距更大 皮肤越来越干燥 最后直接躺平 “实在是学不动了!!!” 但是,如果每次发新版的软件都能帮你圈一下重点,再搭配一个详细解读,把新增功...

这场大数据+AI Meetup,一次性安排了大数据当下热门话题

2020-05-30
阅读 4 分钟
5.1k
近年来,随着工业界多年的努力以及新兴技术的不断涌现,数据规模庞大的问题已逐步得到解决,而数据处理的时效性、数据价值的挖掘正成为企业及开发者面临的新的巨大挑战。也因此,大数据计算引擎、AI、数据仓库、数据湖等成为当前无可争议的热门话题。