头图

分布式数据库--SQL优化之Plan Hint

Part 1 - 关于Hint

Hint是嵌入SQL语句的对优化器进行提示的信息,是DBA进行SQL优化的常用手段。SQL语句经过优化器(规则优化(RBO)、代价优化(CBO)),通常会选择正确的查询路径,但是智者千虑,必有一失,有时优化器也会选择一个很差的计划,使得该条SQL查询变得很慢,此时需要DBA人为干预(通过给SQL语句增加一个注释),告诉优化器要选择指定的访问路径(full scan、index scan)或join 类型(merge、hash、lookup),使得该条SQL语句可以高效的运行。

Part 2 - Hint的使用

通过 /+ ... / 的注释形式放在 SELECT 关键字之后,多个 hint 之间用逗号隔开。

例如 select /+use_index(t, index1)/ * from t where a = 10 and b = 20;

如下图所示,经过RBO会得到如下normalized plan,而/+ use_index(t, index1)/ 将作用于scan选择的过程,这将告诉优化器在选择表t的访问路径(① ② ③)时,选择②索引index1。

image.png

Part 3 - Hint在KaiwuDB中的

解析和应用流程

整体流程如下图3.1所示:

image.png

图3.1 hint 解析使用流程

第一步:输入带有hint SQL语句,如下所示

8868cf6a4ad3c434807b02ddf4927f8.png

第二步:parser 编译解析;

第三步:将AST中的hint信息保存在HintSet中;

第四步:Builder从AST中获取hint信息,将对应hint解析到TableHint和IndexHint结构体中;

第五步:normalized plan阶段(RBO),通过调用buildScan为表构建ScanFlags,调用buildJoin为表构建JoinFlags;

第六步:在CBO阶段进行探索时,根据组成员的Flags信息,通过开销大小,来阻止某些等价表达式的生成,并生成hint需要的表达式,从而减小搜索空间;

第七步:生成hint作用之下的最优查询计划。

Part 4 - Hint 在KaiwuDB中

不同阶段的表现形式

SQL语句中:显示指定要在表c上强制使用idx2,与c和o相关的join操作不允许使用NLJ算子;

经过parser后,hint信息保存在HintSet中;

在Builder中,hint信息以对象index和table为单位进行保存;

在规范化计划树和Memo结构体中,hint信息存在对应的Expr结构体中。

详细流程如下图4.1所示:

image.png

图4.1 hint在不同阶段的表现形式图

Part 5 - Hint对优化器的影响

图5.1结构解释:

image.png

图5.1 hint作用图

bestHT 存储着每个Group的代价最低的表达式。

exprHT 存储所有探索出来的表达式。

Group为逻辑等价的关系表达式的集合。

在KaiwuDB中hint 影响计划的手段主要有两个,一个是探索阶段中,减少表达式的生成(例如指定megejoin,正常情况下会生成 merge、lookup、hash 三种连接类型,但是指定了mergejoin,就会直接不生成其他的的表达式),如下①;另一个是代价计算阶段中返回一个很大的代价hugeCost(例如针对t1,指定index1,然后对于其他的访问方法,则会直接返回很大的代价),如下③。

Hint对优化器的影响如下:

① 排除了若干操作,减少了Memo结构体中表达式的个数,如下图X号所示;

② 决定相关Group的最优计划选择, 如下图Group 1;

③ Group 1中,#1作为规范化表达式必然存在于组中,但是,它的代价被设置为hugeCost;

③ 由于使用ForceIndex,在探索阶段使用其它索引的表达式不会被优化器选择;

⑤ 最终影响最优计划树的选择。

KaiwuDB 是浪潮控股的数据库企业,公司汇聚了全球顶尖的数据库人才,以 AIoT 数据库为核心产品,面向工...

12 声望
1 粉丝
0 条评论
推荐阅读
4月26日-30日,KaiwuDB 在数字中国等你!
2023年4月26日-30日(下周三至周日),作为我国数字中国建设最新成果展示平台、汇聚全球力量助推数字中国建设的合作平台,第六届数字中国建设峰会(数字中国)将以“加快数字中国建设,推进中国式现代化”为主题于...

KaiwuDB阅读 191

封面图
花了几个月时间把 MySQL 重新巩固了一遍,梳理了一篇几万字 “超硬核” 的保姆式学习教程!(持续更新中~)
MySQL 是最流行的关系型数据库管理系统,在 WEB 应用方面 MySQL 是最好的 RDBMS(Relational Database Management System:关系数据库管理系统)应用软件之一。

民工哥14阅读 2.1k

封面图
硬卷完了!MongoDB 打怪升级进阶成神之路( 2023 最新版 )!
前面我们学习:MySQL 打怪升级进阶成神之路、Redis 打怪升级进阶成神之路,然后我们还在继续 NoSQL 的卷王之路。从第一篇文章开始,我们逐步详细介绍了 MogoDB 基础概念、安装和最基本的CURD操作、索引和聚合、工...

民工哥7阅读 749

封面图
初学后端,如何做好表结构设计?
这篇文章介绍了设计数据库表结构应该考虑的4个方面,还有优雅设计的6个原则,举了一个例子分享了我的设计思路,为了提高性能我们也要从多方面考虑缓存问题。

王中阳Go4阅读 1.8k评论 2

封面图
又一款内存数据库横空出世,比 Redis 更强,性能直接飙升一倍!杀疯了
KeyDB是Redis的高性能分支,专注于多线程,内存效率和高吞吐量。除了多线程之外,KeyDB还具有仅在Redis Enterprise中可用的功能,例如Active Replication,FLASH存储支持以及一些根本不可用的功能,例如直接备份...

民工哥4阅读 1.7k评论 2

封面图
Win10 安装Docker以及Jenkins(超级详细篇)
安装Docker下载地址:[链接] ,按照它的指引教程,无脑下一步即可。安装成功后电脑会重启。打开docker桌面端,会显示进入链接,下载WSL 安装包进行无脑安装即可。安装 Linux 内核更新包 (重启电脑)重启 Docker ...

九旬3阅读 1.1k

蚂蚁安全科技 Nydus 镜像加速实践
蚂蚁安全科技 Nydus 镜像加速实践原创 曦栖 金融级分布式架构文|蚂蚁集团 ZOLOZ 团队使用全球领先安全科技,为用户和机构提供安全、便捷的安全风控解决方案。本文 6386 字 阅读 12 分钟背景简介ZOLOZ[1]是蚂蚁集...

SOFAStack1阅读 3.8k

封面图

KaiwuDB 是浪潮控股的数据库企业,公司汇聚了全球顶尖的数据库人才,以 AIoT 数据库为核心产品,面向工...

12 声望
1 粉丝
宣传栏