Apache Doris 基于 Job Scheduler 实现秒级触发任务调度能力

4 月 9 日
阅读 6 分钟
20
作者|SelectDB 技术团队在数据管理愈加精细化的需求背景下,定时调度在其中扮演着重要的角色。它通常被应用于以下场景:定期数据更新,如周期性数据导入和 ETL 操作,减少人工干预,提高数据处理的效率和准确性。结合 Catalog 实现外部数据源数据定期同步,确保多源数据高效、准确的整合到目标系统中,满足复杂的业务分...

Apache Doris 2.1.1 版本正式发布!

4 月 3 日
阅读 2 分钟
37
亲爱的社区小伙伴们,Apache Doris 2.1.1 版本已于 2024 年 4 月 3 日正式发布。该版本针对 2.1.0 版本出现的问题进行较为全面的优化,提交了若干改进项以及问题修复,进一步提升了系统的性能及稳定性,欢迎大家下载体验。

钱大妈生鲜如何利用 CCR 实现 Apache Doris 集群读写分离

3 月 29 日
阅读 4 分钟
47
钱大妈是社区生鲜连锁品牌的开拓者,经过十一年的稳健运营,已成为行业内的领军品牌,截至 2023 年 7 月已全国布局超 30 多座城市,门店总数 3000 余家,服务家庭超 1000 万。近年来,随着业务的高速发展以及门店的快速扩张,钱大妈需要对生鲜产品的采购、销售、库存等数据进行实时监控和分析,以保障食品的新鲜度及品质...

Apache Doris 支持 Arrow Flight SQL 协议,数据传输效率实现百倍飞跃

3 月 26 日
阅读 13 分钟
70
近年来,随着数据科学、数据湖分析等场景的兴起,对数据读取和传输速度提出更高的要求。而 JDBC/ODBC 作为与数据库交互的主流标准,在应对大规模数据读取和传输时显得力不从心,无法满足高性能、低延迟等数据处理需求。为提供更高效的数据传输方案,Apache Doris 在 2.1 版本中基于 Arrow Flight SQL 协议实现了高速数据...

兼容Presto、Trino、ClickHouse、Hive近10种 QL 方言,SQL Convertor 实操演示

3 月 22 日
阅读 10 分钟
44
随着版本迭代,Apache Doris 一直在拓展应用场景边界,从典型的实时报表、交互式 Ad-hoc 分析等 OLAP 场景到湖仓一体、高并发数据服务、日志检索分析及批量数据处理,越来越多用户与企业开始将 Apache Doris 作为统一的数据分析产品,以解决多组件带来的数据冗余、架构复杂、分析时效性低、运维难度大等问题。

阿里云 SelectDB 联合 DTS ,一键实现 TP 数据实时入仓

3 月 19 日
阅读 2 分钟
65
大数据时代背景下,高效的数据流转与实时分析能力对于企业的竞争力至关重要。近日,飞轮科技与阿里云联合共建的新一代云原生实时数据仓库:阿里云数据库 SelectDB ,进一步强化了与阿里云数据传输服务(DTS)的深度融合,在提供亚秒级响应和海量数据查询能力的同时,实现一键从多种源数据库迁移或同步至阿里云 SelectDB ...

Apache Doris 如何基于自增列满足高效字典编码等典型场景需求

3 月 18 日
阅读 12 分钟
76
在分布式数据库中,由于自增序列的可用值分配涉及全局事务,这使自增列的实现存在一定难度。然而, Apache Doris 在 2.1 版本中实现了高效的自增列功能,提供了创新性的自增序列预分配方案。当用户开启自增列之后,自增序列值分配所带来的写入损耗可以忽略不计。其次,为了实现最佳的写入效率,我们在自增列功能的设计上...

Apache Doris 2.0.6 版本正式发布

3 月 18 日
阅读 1 分钟
41
亲爱的社区小伙伴们,Apache Doris 2.0.6 版本已于 2024 年 3 月 12 日正式与大家见面,该版本在物化视图、统计信息收集、JDBC Catalog 等方面进行了更新优化,并提交了 114 个改进项以及问题修复,欢迎大家下载体验。

灵活应对半结构化数据,Apache Doris Variant 数据类型使用介绍及设计实现

3 月 14 日
阅读 18 分钟
73
在最新发布的 Apache Doris 2.1 新版本中,我们引入了全新的数据类型 Variant,对半结构化数据分析能力进行了全面增强。无需提前在表结构中定义具体的列,彻底改变了 Doris 过去基于 String、JSONB 等行存类型的存储和查询方式。为了让大家快速学习和使用 Doris Variant 数据类型,我们为大家提供了实操演示视频,详细展...