Databend Operator: 打造开源的数据仓库部署利器

4 月 22 日
阅读 3 分钟
228
在数据基础设施逐步云原生化的今天,开源数据库的商业化路径也越来越清晰。Databend Cloud 作为我们的核心产品,依托主流公有云,为数据湖仓场景提供托管服务,长期稳定承载 800 PB 以上数据,覆盖千级 QPS 在线查询、每秒千万行实时分析及 PB 级多表批处理等多样化负载。借助 Kubernetes 的弹性调度与声明式运维,平台...
封面图

如何使用 Databend Cloud 化简大数据架构?| Data Infra NO.24 回顾

4 月 15 日
阅读 8 分钟
361
随着数据量的爆炸式增长和业务需求的多样化,许多企业的大数据平台在多年的演进中堆积了 Hadoop、Hive、Spark、Flink、Kafka 等数十种组件,复杂度的累积使架构演变为”难以维护的黑盒",企业用户不得不承受着传统数据架构的慢性疼痛。亚舟将在本次分享中,以用户行为分析场景为例,介绍 Databend Cloud 如何化繁为简,帮...
封面图

共话云原生湖仓与 AI 基础设施前沿趋势,拆解 Databend 实践心得 | Databend Meetup 成都站回顾

4 月 11 日
阅读 17 分钟
353
3 月底,Databend 2025 开年首场 Meetup 在成都多点公司成功举办!活动特别邀请到四位重量级嘉宾:多点科技数据库架构师王春涛、多点DMALL数据平台负责人李铭、Databend联合创始人吴炳锡,以及鹏城实验室王璞博士。在春日的蓉城,嘉宾们与来自马上消费金融、多点、中国电子云等企业的用户和技术爱好者们齐聚一堂,展开了...
封面图

Databend Cloud 如何给游戏行业数据分析带来 10 倍收益提升?

4 月 10 日
阅读 14 分钟
307
游戏业务需求非常多,如运营层、玩法层、经济层等。比如四五个人组成的一个流量小组,要投放 100 万流量,这个时间段内能否赚回这 100 万?这几天如何分析数据?对于这样的数据分析需求,如果还用传统的方法做成看板展示,基本上不太现实。这种时候,团队通常会直接使用 SQL 查询,再把数据导出到 Excel 表里。一个个灵...
封面图

理解 Calvin 的架构设计与工作原理

4 月 9 日
阅读 7 分钟
273
Calvin 是一个针对分区式数据库系统设计的分布式 transaction 调度与复制层,其目标是在保证线性可扩展性和高可用性的同时提供完整的 ACID transaction 。为了解决传统分布式 transaction 高开销、低性能的问题,Calvin 引入了确定性 transaction 调度的理念:在 transaction 执行前,先确定并记录 transaction 的全局顺...
封面图

Databend Cloud Dashboard 全新升级:直击痛点,释放数据价值

4 月 3 日
阅读 3 分钟
370
自 Databend Cloud 上线以来,我们一直致力于为用户提供高效的数据处理与可视化体验。早期,我们在工作区的“图表”区域推出了轻量级可视化功能,支持积分卡、饼图、柱状图和折线图四种展示方式。这些功能简单易用,基本满足了用户对数据可视化的日常需求。然而,随着用户规模的增长和使用场景的多样化,一些深层次的痛点...
封面图

Databend 产品月报(2025年3月)

3 月 31 日
阅读 7 分钟
396
很高兴为您带来 Databend 2025 年 3 月的最新更新、新功能和改进!我们希望这些增强功能对您有所帮助,并期待您的反馈。仪表盘共享您现在可以在 Databend Cloud 上与组织内的所有人或特定个人共享您的仪表盘,并选择以下权限级别之一来控制他人对其的访问方式:只读 (Read Only) :查看仪表盘,但无法进行更改或运行查...
封面图

从 Snowflake 到 Databend Cloud:全球游戏平台借助 Databend 实现实时数据处理

3 月 19 日
阅读 3 分钟
394
导读:某全球游戏平台为全球数百万玩家提供实时的技能型游戏体验与无缝的实时互动。对该游戏平台而言,保持数据的实时更新和实时分析,对提升玩家互动和留存率至关重要。他们在使用 Snowflake 进行实时数据摄取和分析时遇到了重大挑战,且成本居高不下。为了更高效地实现实时数据分析,该平台从 Snowflake 迁移到 Databe...
封面图

Databend 产品月报(2025年2月)

3 月 5 日
阅读 8 分钟
426
Databend 推荐使用 db-archiver 进行 MySQL 批量迁移,使用 Flink CDC 进行实时变更数据捕获(CDC)迁移。教程已更新:
封面图

Databend Cloud 通过 SOC 2 和 GDPR 认证,助力用户实现数据安全与隐私保护的双重保障

2 月 28 日
阅读 3 分钟
405
随着数字化时代的到来,数据已经成为企业最重要的资产之一。而随着数据使用的日益广泛,如何确保数据的安全性和隐私保护,也成为了全球企业面临的共同挑战。为了应对这一挑战,我们非常高兴地宣布,Databend Cloud 平台近日通过了两项国际权威认证——SOC 2 和 GDPR认证,这一重要进展不仅意味着Databend Cloud 在数据安全...
封面图

Databend 基于青云 DeepSeek-V3 服务拥抱技术创新

2 月 12 日
阅读 2 分钟
503
随着业务的飞速发展, 依托创新数据处理技术来为众多企业提供云原生湖仓解决方案的 Databend,面临着用户日益增长的复杂数据处理需求,从 2023 年起便开始探索将大模型能力引入湖仓,对算力和 API 稳定性提出了近乎苛刻的要求,青云科技旗下基石智算CoresHub 提供 DeepSeek 稳定的 API 调用,为 Databend 的能力创新筑牢...
封面图

Databend 产品月报(2025年1月)

2 月 7 日
阅读 3 分钟
499
很高兴为您带来 Databend 2025 年 1 月的最新更新、新功能和改进!我们希望这些增强功能对您有所帮助,并期待您的反馈,祝您新春快乐!
封面图

Databend x 沉浸式翻译 | 基于 Databend Cloud 构建高效低成本的业务数据分析体系

1 月 23 日
阅读 5 分钟
521
「沉浸式翻译」是一个非常流行的双语对照网页翻译扩展工具,用户可以用它来即时翻译外文网页、PDF 文档、ePub 电子书、字幕等。它不仅可以实现原文加译文实时双语对照显示,还支持 Google、OpenAI、DeepL、微软、Gemini、Claude 等数十家翻译平台服务的自定义设置,在网络上好评如潮。随着用户量持续增长,其运营和产品...
封面图

Databend 2024 年度总结:乘势而上,创新无止境

1 月 9 日
阅读 4 分钟
512
2024 年对 Databend Labs 来说是非凡的一年,也是具有里程碑意义的一年。这一年,Databend 不仅迎来了成立三周年,更迈入了商业化元年。
封面图

信创、湖仓一体化、AI+DB,2024年数据库&湖仓发展总结与展望

1 月 7 日
阅读 5 分钟
596
时光荏苒,转眼间 2025 年已然来临,这又是我从传统 OLTP 数据库领域转向云原生湖仓 Databend 的第三个年头,这段转变恰如一场快速的旅程,让我深感这一年如飞箭般迅速。展望未来,我意识到,尽管数据库行业正面临明显的瓶颈,湖仓领域却蕴藏着无尽的潜力,而 AI 的崛起将进一步提高从业门槛。以下,我将从四个方面与大...
封面图

Databend 产品月报(2024年12月)

1 月 2 日
阅读 6 分钟
578
很高兴为您带来 Databend 2024 年 12 月的最新更新、新功能和改进!我们希望这些增强功能对您有所帮助,并期待您的反馈,祝您新年快乐!
封面图

如何构建云原生时空大数据平台?

1 月 2 日
阅读 12 分钟
487
在现代企业中,随着对技术的依赖日益加深,空间数据的重要性愈发显著。它通过结合地理成分(如纬度、经度、地址、邮编等)与业务数据,成为解决复杂问题的重要工具。地理空间数据可从多种来源获取,例如卫星影像、传感器网络和现场调查,广泛应用于优化业务流程、提升效率及推进智慧城市建设。无论是优化门店选址、提升...
封面图

使用 Testcontainers 轻松集成 Databend 测试环境

2024-12-19
阅读 6 分钟
514
作者:韩山杰 Databend Cloud 研发工程师 [链接]Testcontainers 是一个开源库,用于提供一次性的、轻量级的数据库实例、消息代理、网络浏览器,或者任何可以在 Docker 容器中运行的服务。其核心特点是:一次性:测试完成后可以直接丢弃轻量级:启动快速,资源占用少基于 Docker:利用容器技术实现隔离主要可以用到以下场...

Databend 为什么使用 Rust 开发?

2024-12-16
阅读 7 分钟
569
11 月 30 日,Rust China Tour 武汉站在武汉恺德光谷城际酒店举行。本次活动汇聚了来自 Databend、GreptimeDB、华中科技大学的多位 Rust 技术专家和研究者,共同探讨 Rust 语言在前沿技术中的创新应用。Databend 数据库研发工程师张祖前在活动中带来主题演讲《云原生数仓 Databend 的 Rust 开发实践》,重点探讨 Databen...
封面图

Databend 产品月报(2024年11月)

2024-12-16
阅读 7 分钟
459
Databend Cloud 现在允许您通过为计算集群分配特定角色来管理计算集群访问,以便只有具有该角色的用户才能访问计算集群。需要注意的是,计算集群访问控制默认未启用。要启用访问控制,请在 工单 > 创建新工单 提交请求。
封面图

告别 Kafka,拥抱 Databend:构建高效低成本的用户行为分析体系

2024-11-27
阅读 4 分钟
605
用户行为数据埋点指标是数据仓库中不可或缺的重要数据源之一,同时也是企业最宝贵的资产之一。通常情况下,用户行为数据分析包含两大数据源:用户行为分析日志和上游关系型数据库(如 MySQL)。基于这些数据,企业可以进行用户增长分析、用户行为研究,甚至通过用户行为分析精准排查用户问题。
封面图

存算分离的过去、现在和未来

2024-11-21
阅读 8 分钟
463
存算分离架构,作为数据处理领域的一个重要概念,从其最初的雏形到如今广泛应用,经历了多次迭代和变革。雁飞老师在分享中从过去的存算架构,逐步讲述存算分离的演进,现今的存算分离架构的优势及其在 Databend 中的体现,直至未来存算分离的发展方向。
封面图

Databend 产品月报(2024年10月)

2024-11-01
阅读 10 分钟
377
很高兴为您带来 Databend 2024 年 10 月的最新更新、新功能和改进!我们希望这些增强功能对您有所帮助,并期待您的反馈。Databend Cloud:多集群的计算集群多集群的计算集群会根据工作负载需求自动调整计算资源,添加或移除集群。它通过按需扩展或缩减,确保高并发和性能的同时优化成本。您可以在创建计算集群时启用多集...

解锁低成本数据库归档方案,Databend 受邀参加 TiDB 杭州地区交流会精彩回顾

2024-10-31
阅读 6 分钟
407
上周六下午(10月26日),TiDB 地区交流活动在杭州圆满举办!本次活动由 TiDB 社区杭州地区组织者——电魂网络任嘉伟老师与杭州银行邵健老师精心筹办,来自电魂网络、杭州银行、bilibili、安能物流、Databend、云猿生、美创科技、PingCAP 等多位资深技术专家齐聚一堂,共同探讨 TiDB 在各行业的创新实践和技术应用。

面向 Data+AI 的统一数据目录探索 | Data Infra NO.22 回顾(含资料发布)

2024-10-29
阅读 6 分钟
502
随着生成式人工智能(Generative AI)的崛起,从图像生成、自然语言处理到个性化推荐系统,生成式 AI 技术正迅速改变着各行各业的面貌。而在这场变革背后,数据的管理和治理显得尤为重要。对于企业来说,数据不仅是基础资源,更是构建 AI 应用和增强业务能力的关键。Apache Gravitino(incubating) 与 Databend 作为数...
封面图

Databend 产品月报(2024年9月)

2024-10-17
阅读 3 分钟
307
您现在可以通过定义字典的结构并指定外部数据源来创建字典。Databend 的字典功能提供了一种高效的方式,可以直接在 Databend 中集成并查询来自支持的外部数据源(目前支持 MySQL 和 Redis)。通过充当内存中的键值存储,字典能够快速访问外部数据,而不需要复杂的数据管道或传统的 ETL 过程。

释放无限潜力:Databend 存算分离架构如何让企业数据管理焕然一新?

2024-10-15
阅读 5 分钟
379
随着云计算和大数据技术的发展,存储与计算分离(Separation of Storage and Compute,简称存算分离)逐渐成为数据库和大数据处理系统的主流架构。这一架构的核心思想是将数据存储与计算资源解耦,以便在需要时能够独立扩展。这种方式极大地提高了资源的利用率和系统的灵活性,成为云原生数据库设计中的重要趋势。

Databend 实现高效实时查询:深入解读 Dictionary 功能

2024-09-30
阅读 6 分钟
441
作者:洪文丽开源之夏2024“支持 External Dictionaries”项目参与者东北大学软件工程专业云计算方向大二在读,喜欢挑战自我,尝试新鲜事物

探索 Snowflake 与 Databend 的云原生数仓技术与应用实践

2024-09-26
阅读 13 分钟
775
上周六,第二十一期「Data Infra 研究社」在线上与大家相见。活动邀请到了西门子数据分析师陈砚林与 Databend 联合创始人王吟,为我们带来了一场关于 Snowflake 和 Databend 的技术探索。Snowflake,这个市值曾超过 700 亿美元的云原生数据仓库巨头,以其独特的存储与计算分离架构,正在改变传统数据仓库的面貌。尽管进...
封面图

Databend 为什么能帮用户降低 90% 成本?

2024-09-25
阅读 4 分钟
399
近年来,随着大数据的快速发展,企业对数据存储和计算的需求日益增长。然而,随着数据量的爆炸式增长,传统数据仓库架构面临着高昂的运维和扩展成本。许多公司发现,当数据规模达到一定程度时,存储、计算和网络开销会显著增加,从而导致运营成本成倍上升。