2021第十二届中国数据库技术大会(DTCC)将于2021年10月18-20日,在北京国际会议中心举行,Tapdata 创始人唐建法受邀分享:如何打造面向 TP 业务的数据平台架构。
演讲时间:2021年10月20日 09:40-10:20
演讲地点:北京国际会议中心(专场11:[ 企业数据中台设计与实践 ])
演讲主题:Real Time DaaS - 面向TP业务的数据平台架构
从20年前的传统数仓,到10年前大数据平台,5年前开始火热的数据中台以及最近出现的湖仓一体新数据平台,今天被数据孤岛困扰的企业,面临着太多的选择。这些数据产品及架构有一个共性:就是他们都是为本质上解决的都是分析洞察类场景,所谓的 AP 场景(Analytical Processing)。但是实际上,企业在 TP 类型业务上的投入和 AP 相比是9:1。为什么没有为TP业务的数据平台呢?Tapdata 创始人唐建法将从下面几个角度来剖析原因并介绍一个适合 TP 业务的 Real Time DaaS 数据架构:
- AP业务场景 vs. TP 业务场景
- 常见AP型数据平台:数仓、大数据平台、云数仓
- 数据中台,最难解释的一个数据架构
- 面向TP型数据平台:
a)为什么需要
b)技术特征 - Real Time DaaS:为TP业务打造的数据架构
- 技术核心
a)基于实时复制的数据虚拟化技术
b)基于索引的分布式数据库存储
c)主数据管理能力
d)统一数据接口及自助式服务 - Real Time DaaS 架构特性和优势
- Real Time DaaS 实战案例
Tapdata 创始人唐建法(TJ)是一名具有多年海内外工作经验的架构师、数据库专家和开源软件推广者。TJ 在回国之前,曾在北美留学并工作多年,涉及的技术栈包括 Java, Javascript, Python, MongoDB 等,并且是开源软件 angoose 的作者。回到中国以后,TJ 和阿里、百度、360等互联网公司的 MongoDB 爱好者共同创建了 MongoDB 中文社区并发展成了拥有数万名成员的世界上最大的 MongoDB 技术社区。在过去几年中,MongoDB 中文社区累计输出了数百篇技术博客,数十场线下技术大会以及维护着最完整的MongoDB中文文档。TJ 在2019年创立了Tapdata,一家专注于实时数据服务的创新技术公司,核心团队来自 MongoDB 和 BAT。
Tapdata 是全球首个基于数据即服务(Data as a Service,简称 DaaS)架构理念、面向 TP 业务或场景的企业实时主数据服务平台,具备行业领先的技术优势:基于数据同步的虚拟化、流处理引擎 + 可视化数据开发平台、低代码API发布能力、异构数据源统一访问框架等,能够帮助企业快速打通数据孤岛,构建主数据服务平台,为新业务提供统一、完整、实时的数据,并且支持十万级并发和毫秒级响应,直接应用到TP业务系统,切中企业的核心运营价值链。
目前,Tapdata 已服务包括周生生、中国移动、中国南方电网、中国一汽、富邦银行、罗辑思维等数十家行业标杆企业,并与MongoDB、TIDB、SequoiaDB、亚信科技、中国移动、达成战略合作。Tapdata 产品的稳定性、扩展性、灵活性、易用性等方面经过了多种业务场景的验证,并得到了客户和合作伙伴的一致认可。
进一步了解 Tapdata 实时数据服务平台,更多技术文章可前往 Tapdata 技术博客。Tapdata 自研的异构数据库实时同步工具—— Tapdata Cloud ,现已免费开放给技术开发者使用,目前支持 Oracle、MySQL、PostgreSQL、SQL Server、MongoDB、Elasticsearch 、达梦、Kafka等主流库之间的数据迁移和同步,即将支持 DB2、Sybase ASE、Redis、GBase、GaussDB 等。
**粗体** _斜体_ [链接](http://example.com) `代码` - 列表 > 引用
。你还可以使用@
来通知其他用户。