干货来了!神州数码 CIO 沈旸揭秘 Hackathon 背后的 TiDB 生态丨TiDB Hackathon 评委访谈

2021-12-22
阅读 5 分钟
1.9k
你多久没仅为 Have fun 去写一段代码?你多久没为实现一个天马行空的 idea 而兴奋不已?你又多久没为和团队一起 Coding 而干劲十足了?来 TiDB Hackathon 吧,这些体验都能找到!

DM 分库分表 DDL “悲观协调” 模式介绍丨TiDB 工具分享

2021-12-21
阅读 2 分钟
1.6k
TiDB 作为分库分表方案的一个 “终结者”,获得了许多用户的青睐。在切换到 TiDB 之后,用户告别了分库分表查询和运维带来的复杂度。但是在从分库分表方案切换到 TiDB 的过程中,这个复杂度转移到了数据迁移流程里。TiDB DM 工具为用户提供了分库分表合并迁移功能,在数据迁移的过程中,支持将分表 DML 事件合并迁移,并一...

PingCAP 入选 CB Insights 中国「数据链路安全领航者」榜单,保障全球用户存储安全

2021-12-17
阅读 2 分钟
1.4k
全球知名市场研究分析机构 CB Insights 中国于近期发布了「数据链路安全领航者」榜单,PingCAP 以 “全链路透明加密,满足多国合规标准”的关键词成功上榜存储安全这一环节,在数据安全领域更进一步。

备份的 “算子下推”:BR 简介丨TiDB 工具分享

2021-12-16
阅读 7 分钟
2.3k
BR 选择了在 Transaction KV 层面进行扫描来实现备份。这样,备份的核心便是分布在多个 TiKV 节点上的 MVCC Scan:简单,粗暴,但是有效,它生来就继承了 TiKV 的诸多优势:分布式、利于横向拓展、灵活(可以备份任意范围、未 GC 的任意版本的数据)等等优点。

TiDB 故障诊断与性能排查:发生即看见,一切可回溯,Continuous Profiling 应用实践

2021-12-15
阅读 4 分钟
2.3k
在企业遭遇的 IT 故障中,约有 30% 与数据库相关。当这些故障涉及到应用系统、网络环境、硬件设备时,恢复时间可能达到数小时,对业务连续性造成破坏,影响用户体验甚至营收。在复杂分布式系统场景下,如何提高数据库的可观测性,帮助运维人员快速诊断问题,优化故障处理流程一直是困扰着企业的一大难题。

Explore the Sky丨来 TiDB Hackathon 2021 探索无限可能

2021-12-10
阅读 3 分钟
2.6k
本届 Hackathon 主题为「Explore the Sky」,将在 2022.1.8 - 9 两个比赛日进行开发,线上线下联动。 从 Ti 星球到宇宙苍穹,我们用 Hacking 连接更广泛的生态,给予参赛者尽情发挥的想象空间。本届 Hackathon 我们对赛道进行了全面升级,开辟出内核、工具、生态、「∞」四大赛道,参赛者不论是数据库开发者,数据库上下...

使用 KubeSphere 快速部署 Chaos Mesh

2021-12-08
阅读 4 分钟
2.8k
Chaos Mesh 是一个开源的云原生混沌工程平台,提供丰富的故障模拟类型,具有强大的故障场景编排能力,方便用户在开发测试中以及生产环境中模拟现实世界中可能出现的各类异常,帮助用户发现系统潜在的问题。

网易云音乐 DBA 谈 TiDB 选型:效率的选择

2021-12-06
阅读 17 分钟
2.2k
title: 网易云音乐 DBA 谈 TiDB 选型:效率的选择author:倪山三date: 2021-12-03summary: 本文摘自由网易 DBA 团队撰写的《效率的选择——分布式数据库 TiDB 网易内部选型介绍》一文,对比了以 TiDB 为基础的创新架构和 MySQL + DDB 传统架构的差异,从业务适配、降本增效、技术创新等多个维度阐释了网易考虑引入 TiDB 的...

带着问题读 TiDB 源码:Power BI Desktop 以 MySQL 驱动连接 TiDB 报错

2021-12-02
阅读 12 分钟
1.9k
​常有人说,阅读源码是每个优秀开发工程师的必经之路,但是在面对像类似 TiDB 这样复杂的系统时,源码阅读是一个非常庞大的工程。而对一些 TiDB User 来说,从自己日常遇到的问题出发,反过来阅读源码就是一个不错的切入点,因此我们策划了《带着问题读源码》系列文章。

TiDB 5.3 发版 —— 跨越可观测性鸿沟,实现 HTAP 性能和稳定性的新飞跃

2021-12-01
阅读 5 分钟
1.8k
“当用户使用软件时,会需要面对的两个鸿沟:一个是执行的鸿沟,在这里,用户要弄清楚如何操作,与软件「对话」;另一个是评估的鸿沟,用户要弄清楚操作的结果。” PingCAP 联合创始人兼 CTO 黄东旭在《做出让人爱不释手的基础软件》中提到,“ 我们作为设计师的使命就是帮助用户消除可观测性和可交互性这两个鸿沟。”

Chaos Mesh + SkyWalking,打造可观测的混沌工程

2021-11-30
阅读 3 分钟
2k
title: Chaos Mesh X SkyWalking: 可观测的混沌工程author:王宁暄date: 2021-11-29summary: 本篇文章将分享如何通过将 SkyWalking 和 Chaos Mesh 结合,运用 Event 信息监控,实时了解混沌实验对应用服务性能造成的影响。

带着问题读 TiDB 源码:Hive 元数据使用 TiDB 启动报错

2021-11-26
阅读 6 分钟
1.3k
在 TiDB 社区活跃较久的伙伴们应该知道,过去我们有被称为 24 章经的《TiDB 源码阅读系列文章》,也有面向 TiKV 的《TiKV 源码解析系列文章》以及 《Deep Dive TiKV 系列文章》。这些系列文章的内容非常深入,能够帮助大家从非常细节的原理入手了解 TiDB 以及 TiKV 的实现方式和基础原理。

TiDB Cloud 通过 GDPR 认证丨成为全球可信赖的数据库云服务供应商

2021-11-25
阅读 1 分钟
2.2k
近日,企业级数据库提供商 PingCAP 的全托管数据库云服务产品 TiDB Cloud 由第三方机构 ePrivacy GmbH 认证符合欧盟 GDPR 要求。这也是 TiDB Cloud 继完成 SOC 2 Type 2 和 ISO 27001 认证后在数据安全方面获得的最新认证。GDPR (​​General Data Protection Regulation) 通用数据保护条例是欧盟议会和欧盟理事会在 2016 ...

TiDB 数据一致性校验实现:Sync-diff-inspector 优化方案

2021-11-24
阅读 6 分钟
1.6k
在数据同步的场景下,上下游数据的一致性校验是非常重要的一个环节,缺少数据校验,可能会对商业决策产生非常负面的影响。。Sync-diff-inspector 是 Data Platform 团队开发的一款一致性校验工具,它能对多种数据同步场景的上下游数据进行一致性校验,如多数据源到单一目的(mysql 中分库分表到 TiDB 中)、单一源到单一...

中通大数据平台在大促中的进化

2021-11-24
阅读 5 分钟
1.7k
一年一度的双十一又双叒叕来了,给技术人最好的礼物就是大促技术指南! 而经过这些年的发展,大促早已不仅仅局限于电商行业,现在各行各业其实都会采用类似方式做运营活动,汽车界有 818,电商有 618 、11.11 等等,各种各样的大促场景,对包括数据库在内的基础软件提出了很多新挑战,同时也积累了诸多最佳实践。

媒体观点|没有电商巨头有钱,又要挑战双十一流量高峰,一次低成本、高质量的大促是如何做到的?

2021-11-19
阅读 3 分钟
1.3k
818 汽车狂欢节乃易车网首次大促活动,并且采用台网互动的直播形式,涉及数据库的应用场景颇多,如实时数据看板、台网互动直播、摇一摇、直播投票等,不仅要求数据库能够存储海量数据,同时还能支撑起高并发、低延迟场景。然而最初基于 MySQL 设计的方案着实不给力,在压测过程中,极端情况下主从延迟高、切换时间过长,...

内存泄漏的定位与排查:Heap Profiling 原理解析

2021-11-18
阅读 21 分钟
3.6k
title: 内存泄漏的定位与排查:Heap Profiling 原理解析author: ['张业祥']date: 2021-11-17summary: 本文将介绍一些常见的 Heap Profiler 的实现原理及使用方法,帮助读者更容易地理解 TiKV 中相关实现,或将这类分析手段更好地运用到自己项目中。

数据引擎助力车娱融合新业态 让秒杀狂欢更从容

2021-11-16
阅读 4 分钟
1.2k
一年一度的双十一又双叒叕来了,给技术人最好的礼物就是大促技术指南!而经过这些年的发展,大促早已不仅仅局限于电商行业,现在各行各业其实都会采用类似方式做运营活动,汽车界有 818,电商有 618 、11.11 等等,各种各样的大促场景,对包括数据库在内的基础软件提出了很多新挑战,同时也积累了诸多最佳实践。

我们毕业啦!Hacking Camp 2021 结营,六大生态项目进入新阶段

2021-11-12
阅读 4 分钟
2.1k
11 月 7 日,由 TiDB 社区 X 经纬中国联合主办,初心资本、明势资本、纪源资本、JuiceFS 赞助的 Hacking Camp 2021 生态进行了答辩会,阐述了项目的阶段性成果和对未来工作的展望。

技术升级 & 行业升级,TiDB + 易车打造超级汽车狂欢节

2021-11-11
阅读 3 分钟
1.4k
导语:一年一度的双十一又双叒叕来了,给技术人最好的礼物就是大促技术指南! 而经过这些年的发展,大促早已不仅仅局限于电商行业,现在各行各业其实都会采用类似方式做运营活动,汽车界有 818,电商有 618 、11.11 等等,各种各样的大促场景,对包括数据库在内的基础软件提出了很多新挑战,同时也积累了诸多最佳实践。

NewSQL 在微众银行核心批量场景的应用

2021-11-10
阅读 6 分钟
1.9k
本文由微众银行数据库负责人胡盼盼撰写,介绍了微众银行自 2014 年以来从传统 RDBMS 到 NewSQL 的架构演进,以及 TiDB 在微众银行核心批量场景的应用。

TiDB + 京东云数据库打造大促极速秒杀体验

2021-11-08
阅读 3 分钟
1.5k
导语:一年一度的 11.11 又双叒叕来了,给技术人最好的礼物就是技术指南! 而经过这些年的发展,购物节早已不仅仅局限于电商行业,现在各行各业其实都会采用类似方式做运营活动,汽车界有 818,小米有米粉节等等,这对包括数据库在内的基础软件提出了很多新挑战,同时也积累了诸多最佳实践。

理想汽车 HTAP 读流量优化指南

2021-11-05
阅读 8 分钟
2.3k
“没有任何一种数据库是银弹,业务场景的适配和降本增效永远是最重要的。” 数据库的性能优化能够帮助企业最大限度地利用系统资源,提高业务支撑能力和用户体验。本文为 TiDB 性能调优专题的第一篇,在这个专题中,我们将邀请更多 TiDBer 从实际的业务场景出发,分享 TiDB 优化的最佳实践。

真实场景是最好的架构师:请查收这份来自 TiDB 社区的数据库选型指南!

2021-11-03
阅读 2 分钟
2.4k
属于 TiDB 社区自己的 第一本电子书 终于“诞生啦”在 【 TiDB 社区 】第一届1024 程序员心愿节 中,我们听到了部分 TiDBer 的呼喊声~他们希望 TiDB 社区 能出书籍,

干货分享丨携程国际业务动态实时标签处理平台实践

2021-11-02
阅读 7 分钟
2.2k
本文由携程技术团队撰写,介绍了携程自研的国际业务动态实时标签处理平台。其中标签持久化的场景需要解决业务标签的持久化存储、更新、查询服务,TiDB 通过对于不同场景查询特性的支持满足了不同业务场景访问业务特征数据的需要。作者介绍

TiDB HTAP 上手指南丨添加 TiFlash 副本的工作原理

2021-11-02
阅读 5 分钟
2.4k
TiFlash 是 TiDB HTAP 形态的关键组件,它是 TiKV 的列存扩展,在提供了良好的隔离性的同时,也兼顾了强一致性。列存副本通过 Raft Learner 协议异步复制,但是在读取的时候通过 Raft 校对索引配合 MVCC 的方式获得 Snapshot Isolation 的一致性隔离级别。这个架构很好地解决了 HTAP 场景的隔离性以及列存同步的问题。

通过 ProxySQL 在 TiDB 上实现 SQL 的规则化路由

2021-10-29
阅读 9 分钟
3k
作为一款 HTAP 数据库,TiDB 能同时处理来自用户端的 OLTP 在线业务与 OLAP 分析业务。针对分析类需求,优化器会自动将请求路由到列存的 TiFlash 节点;而对于在线请求,优化器会自动路由到行存 TiKV 请求。对于 HTAP 数据库,我们最关心的莫过于占用大量资源的分析类查询是否会影响到在线的 OLTP 业务,针对这个问题,T...

TiFlink:使用 TiKV 和 Flink 实现强一致的物化视图丨TiDB Hackathon 项目分享

2021-10-28
阅读 10 分钟
2.2k
本文为 TiDB Hackathon 2020 比赛中 TiFlink 项目最新进展的介绍,使用 TiKV 和 Flink 实现了强一致的物化视图的功能。

在 Kubernetes 实施混沌工程—— Chaos Mesh® 原理分析与控制面开发

2021-10-27
阅读 20 分钟
1.9k
Chaos Mesh® 是由 TiDB 背后的 PingCAP 公司开发,运行在 Kubernetes 上的混沌工程(Chaos Engineering)系统。简而言之,Chaos Mesh® 通过运行在 K8s 集群中的“特权”容器,依据 CRD 资源中的测试场景,在集群中制造浑沌(模拟故障)[1]。

DTCC 2021 黄东旭:从 DB 到 DBaaS,数据库技术的当前和未来

2021-10-27
阅读 5 分钟
2.9k
10 月 18 日~ 20 日,第 12 届中国数据库技术大会(DTCC2021)在北京国际会议中心隆重召开。PingCAP 联合创始人兼 CTO 黄东旭受邀在主会场进行了以“TiDB Cloud:from Product to Platform” 为主题的演讲,分享了云原生时代数据库产品平台化的重要性,以及 TiDB 从 DB 到 DBaaS 的经验和体会。以下为分享实录。