NewSQL 在微众银行核心批量场景的应用

2021-11-10
阅读 6 分钟
2.1k
本文由微众银行数据库负责人胡盼盼撰写,介绍了微众银行自 2014 年以来从传统 RDBMS 到 NewSQL 的架构演进,以及 TiDB 在微众银行核心批量场景的应用。

TiDB + 京东云数据库打造大促极速秒杀体验

2021-11-08
阅读 3 分钟
1.7k
导语:一年一度的 11.11 又双叒叕来了,给技术人最好的礼物就是技术指南! 而经过这些年的发展,购物节早已不仅仅局限于电商行业,现在各行各业其实都会采用类似方式做运营活动,汽车界有 818,小米有米粉节等等,这对包括数据库在内的基础软件提出了很多新挑战,同时也积累了诸多最佳实践。

理想汽车 HTAP 读流量优化指南

2021-11-05
阅读 8 分钟
2.4k
“没有任何一种数据库是银弹,业务场景的适配和降本增效永远是最重要的。” 数据库的性能优化能够帮助企业最大限度地利用系统资源,提高业务支撑能力和用户体验。本文为 TiDB 性能调优专题的第一篇,在这个专题中,我们将邀请更多 TiDBer 从实际的业务场景出发,分享 TiDB 优化的最佳实践。

真实场景是最好的架构师:请查收这份来自 TiDB 社区的数据库选型指南!

2021-11-03
阅读 2 分钟
2.6k
属于 TiDB 社区自己的 第一本电子书 终于“诞生啦”在 【 TiDB 社区 】第一届1024 程序员心愿节 中,我们听到了部分 TiDBer 的呼喊声~他们希望 TiDB 社区 能出书籍,

干货分享丨携程国际业务动态实时标签处理平台实践

2021-11-02
阅读 7 分钟
2.4k
本文由携程技术团队撰写,介绍了携程自研的国际业务动态实时标签处理平台。其中标签持久化的场景需要解决业务标签的持久化存储、更新、查询服务,TiDB 通过对于不同场景查询特性的支持满足了不同业务场景访问业务特征数据的需要。作者介绍

TiDB HTAP 上手指南丨添加 TiFlash 副本的工作原理

2021-11-02
阅读 5 分钟
2.7k
TiFlash 是 TiDB HTAP 形态的关键组件,它是 TiKV 的列存扩展,在提供了良好的隔离性的同时,也兼顾了强一致性。列存副本通过 Raft Learner 协议异步复制,但是在读取的时候通过 Raft 校对索引配合 MVCC 的方式获得 Snapshot Isolation 的一致性隔离级别。这个架构很好地解决了 HTAP 场景的隔离性以及列存同步的问题。

通过 ProxySQL 在 TiDB 上实现 SQL 的规则化路由

2021-10-29
阅读 9 分钟
3.2k
作为一款 HTAP 数据库,TiDB 能同时处理来自用户端的 OLTP 在线业务与 OLAP 分析业务。针对分析类需求,优化器会自动将请求路由到列存的 TiFlash 节点;而对于在线请求,优化器会自动路由到行存 TiKV 请求。对于 HTAP 数据库,我们最关心的莫过于占用大量资源的分析类查询是否会影响到在线的 OLTP 业务,针对这个问题,T...

TiFlink:使用 TiKV 和 Flink 实现强一致的物化视图丨TiDB Hackathon 项目分享

2021-10-28
阅读 10 分钟
2.6k
本文为 TiDB Hackathon 2020 比赛中 TiFlink 项目最新进展的介绍,使用 TiKV 和 Flink 实现了强一致的物化视图的功能。

在 Kubernetes 实施混沌工程—— Chaos Mesh® 原理分析与控制面开发

2021-10-27
阅读 20 分钟
2.1k
Chaos Mesh® 是由 TiDB 背后的 PingCAP 公司开发,运行在 Kubernetes 上的混沌工程(Chaos Engineering)系统。简而言之,Chaos Mesh® 通过运行在 K8s 集群中的“特权”容器,依据 CRD 资源中的测试场景,在集群中制造浑沌(模拟故障)[1]。

DTCC 2021 黄东旭:从 DB 到 DBaaS,数据库技术的当前和未来

2021-10-27
阅读 5 分钟
3.1k
10 月 18 日~ 20 日,第 12 届中国数据库技术大会(DTCC2021)在北京国际会议中心隆重召开。PingCAP 联合创始人兼 CTO 黄东旭受邀在主会场进行了以“TiDB Cloud:from Product to Platform” 为主题的演讲,分享了云原生时代数据库产品平台化的重要性,以及 TiDB 从 DB 到 DBaaS 的经验和体会。以下为分享实录。

一文看懂开源许可证丨开源知识科普

2021-10-21
阅读 6 分钟
4.6k
在很多人眼中,「开源」是一个时髦且有情怀的词汇,始终伴随有理想主义色彩,因此不少公司开始给自己贴上“开源”标签。但一个优秀的开源项目远远不止是简单的公开源代码,而是需要将其当作公司战略进行贯彻,才能架设起牢不可破的信任桥梁。

TiDB v5.1 体验: 我用 TiDB 训练了一个机器学习模型

2021-10-21
阅读 17 分钟
2.8k
韩明聪 ,TiDB Contributor,上海交通大学 IPADS 实验室博士研究生,研究方向为系统软件。本文主要介绍了如何在 TiDB 中使用纯 SQL 训练一个机器学习模型。
封面图

PingCAP CTO 黄东旭 :基础软件“好用”指南——必须跨越这两道鸿沟!

2021-10-18
阅读 13 分钟
2.4k
最近有一件事情让我印象特别深刻,作为引子和大家唠一唠:我们在内部做一些极端的流量回归仿真实验时,在 TiKV(TiDB 的分布式存储组件)上观测到了异常的 CPU 使用率,但是从我们的 Grafana Metrics、日志输出里面并没有看到异常,因此也一度困惑了好几天,最后靠一位老司机盲猜并结合 profiling 才找到真凶,真凶出现...

TiDB 在微众银行核心批量场景的实践

2021-10-11
阅读 5 分钟
3.1k
本文根据 PingCAP DevCon 2021 上来自微众银行资深数据库架构师黄蔚的分享整理而成,主要阐述 TiDB 在微众银行的应用实践,包括微众银行选择 TiDB 的背景和 TiDB 的部署架构,以及 TiDB 在贷款核心批量场景的应用,最后分享了基于 TiDB 优化方案的最佳实践和未来规划。

涂鸦智能选型 TiKV 的心路历程

2021-09-28
阅读 4 分钟
4k
本文来自涂鸦智能的刘筠松在 PingCAP DevCon 2021 上的分享,包括 TiDB 在 IoT 领域,特别是在智能家居行业的使用。

快成物流 X TiDB:以数字化引擎领跑物流科技新业态

2021-09-27
阅读 2 分钟
2.3k
随着物流行业的不断发展,物流企业中涉及生产、运输、仓储及运送流环节中的各类数据增长迅速,呈现数据量大、数据类型多、价值变现难的特点。作为中国大宗物流的领导企业,山西快成物流科技有限公司(简称“快成物流”)利用 TiDB 一栈式数据服务平台实现全流程精细化运营,加速海量数据的价值变现,进一步驱动产业创新。

端到端的实时计算:TiDB + Flink 最佳实践

2021-09-26
阅读 10 分钟
3.5k
孙晓光,PingCAP Community Development 团队负责人,原知乎基础研发团队架构师,长期从事分布式系统相关研发工作,关注云原生技术。

TiDB 在茄子科技的应用实践及演进

2021-09-17
阅读 4 分钟
2.3k
茄子科技(海外 SHAREit Group)是一家全球化互联网科技公司,主要从事移动互联网软件研发与全球移动广告变现解决方案、跨境支付解决方案等互联网服务等业务。茄子快传(SHAREit)是茄子科技旗下的代表产品, 是一款一站式数字娱乐内容与跨平台资源分享平台,累计安装用户数近 24 亿。茄子科技作为一家出海企业,已经在...

TiDB 慢日志在伴鱼的实践

2021-09-15
阅读 5 分钟
2.6k
本文来自于伴鱼英语 DBA 组负责人刘江在「能量钛」第二期活动的分享,刘江为大家分享了 TiDB 慢日志在伴鱼的实践。本文将从以下三个方面展开:

浙商银行数字化转型实践

2021-09-09
阅读 4 分钟
2.4k
浙商银行是一家比较年轻的公司,是十二家全国性股份制商业银行之一。浙商银行成立于 2004 年,所以也是 00 后银行。2020 年,浙商银行在英国《银行家》杂志全球银行 1000 强榜单中排名第 97 位,目前已经在香港和上海两地上市。

TiDB 海量 region 集群调优实践

2021-08-04
阅读 6 分钟
2.2k
作者介绍: 田维繁,网易游戏资深数据库工程师,TUG 华南区 Co-Leader。数据库老兵,维护过多种数据库,目前在网易游戏负责数据库私有云平台的运维和开发。

迈向混沌工程闭环生态的 Chaos Mesh® 2.0

2021-08-03
阅读 2 分钟
3k
2021 年 7 月 23 日,我们发布了 Chaos Mesh 2.0 GA 版本。Chaos Mesh 2.0 是一个让人兴奋版本,朝着混沌工程闭环生态迈出了坚实的一步。

当大数据架构遇上 TiDB

2021-07-30
阅读 4 分钟
1.8k
一年前,知乎的大数据架构与 TiDB 首次相遇,那时我们将 Hive MetaStore 的元数据库迁移到了 TiDB,得到了超过单机数据库一个量级的性能提升。在见识过分布式 NewSQL 数据库 TiDB 的威力后,我们对它寄予厚望,将它应用到了大数据架构的其他场景下,如:Hive 大查询报警,NameNode RPC 加速。

黄东旭:可插拔性 × 调度能力 × 云上几乎无限的资源 = ?丨PingCAP DevCon 2021

2021-07-28
阅读 8 分钟
1.7k
这次我分享的主题和 2019 年还是一样的——《The Future of Database》,如果你是 PingCAP 的老朋友,参加过之前几次 DevCon 就会知道,这是我的一个保留节目。如果要说我哪里有一些与众不同的气质,我觉得除了发型之外,还有一个是对技术的信仰和执著。这个保留节目我们还是聊聊技术。

PingCAP DevCon 2021 万字长文回顾:预见数据技术的未来生态

2021-07-27
阅读 13 分钟
3.5k
PingCAP DevCon 是 PingCAP 一年一度的技术盛会,致力于探讨前沿科技与数字化趋势的融合,被誉为观测开源产业、数据库前瞻趋势的风向标。**7 月 24 日,以 "开放、连接、预见" 为主题的 PingCAP DevCon 2021 在京举行,为线上线下数万观众带来一场技术盛宴。PingCAP 创始人兼 CEO 刘奇,在大会上介绍了 PingCAP 在开源、...

使用 TiDB 构建实时应用

2021-07-21
阅读 10 分钟
3.6k
作者介绍:雷宇,TiFlash 研发工程师,毕业于中山大学软件工程专业。目前主要在 PingCAP 从事 TiDB SQL MPP 的相关研发工作。

事务前沿研究丨确定性事务

2021-07-16
阅读 8 分钟
2.9k
在基于 Percolator 提交协议的分布式数据库被提出的时期,学术研究上还出现了一种叫确定性数据库的技术,在这项技术的发展过程中也出现了各种流派。本文将讲解学术上不同的确定性事务和特点,并综合说说他们的优点和面临的问题。

TiDB Operator + Amazon Web Service,探索云原生数据库的最佳实践

2021-07-14
阅读 7 分钟
3.9k
作者介绍: 王天宜,TiDB Community 架构师。曾就职于 Fidelity Investment,Softbank Investment,拥有丰富的数据库高可用方案设计经验,对 TiDB、Oracle、PostgreSQL、MySQL 等数据库的高可用架构与数据库生态有深入研究。

Flink on TiDB —— 便捷可靠的实时数据业务支撑

2021-07-08
阅读 7 分钟
3.1k
作者介绍: 林佳,网易互娱计费数据中心实时业务负责人,实时开发框架 JFlink-SDK 和实时业务平台 JFlink 的主程,Flink Code Contributor。

TiDB 5.1 发版,打造更流畅的企业级数据库体验

2021-07-02
阅读 4 分钟
2.3k
TiDB 5.0 在汽车之家大数据 join 与聚合场景的应用中,MPP 体现出明显的优势,与 MySQL 相比总体效能提升 20 - 50 倍。