【大数据 】SparkSQL连接查询中的谓词下推处理(二)
2019-06-04
阅读 4 分钟
1.6k本文首发于 vivo互联网技术 微信公众号 [链接] 作者：李勇 目录： 1.左表 join 后条件下推 2.左表join中条件不下推 3.右表join中条件下推 4.右表join中条件不下推 5.总结 在《SparkSql连接查询中的谓词下推处理（一）》中，我们介绍了一些基本的概念，并对内连接查询时的一些基本下推规则进行了分析。 本篇文章要介绍的...
【大数据】SparkSql连接查询中的谓词下推处理(一)
2019-05-16
阅读 5 分钟
1.8k本文首发于 vivo互联网技术 微信公众号 [链接]作者：李勇 目录： 1.SparkSql 2.连接查询和连接条件 3.谓词下推 4.内连接查询中的谓词下推规则 4.1.Join后条件通过AND连接 4.2.Join后条件通过OR连接 4.3.分区表使用OR连接过滤条件 1.SparkSql SparkSql 是架构在 Spark 计算框架之上的分布式 Sql 引擎，使用 DataFrame 和 ...