Oracle查询转换之连接谓词推入

简介:

连接谓词推入(Join Predicate  Pushdown)是优化器处理带视图的目标SQL的一种优化手段,它是指虽然优化器会把该SQL中视图的定义SQL语句当作一个独立单元来单独执行,但此时优化器会把原本处于该视图外部查询中和该视图之间的连接条件推入到该视图的定义SQL语句内部,这样是为了能使用上该视图内部相关基表上的索引,进而能走出基于索引的嵌套循环连接。

连接谓词推入所带来的基于索引的嵌套循环连接并不一定能走出更高效的执行计划,因为当做了连接谓词推入后,原目标SQL中的视图就和外部查询产生了关联,同时Oracle又必须将该视图的定义SQL语句当作一个独立的处理单元单独执行,这也就意味着对于外部查询所在结果集中的每一条记录,上述视图的定义SQL语句都得单独执行一次,这样一旦外部查询所在的结果集的Cardinality比较大的话,即便在执行上述视图的定义语句时能用上索引,整个SQL的执行效率也不定比不做连接谓词推入时的哈希连接或排序合并连接高。所以Oracle在做连接谓词推入时会考虑成本,只有当经过连接谓词推入后走嵌套循环连接的等价改写SQL的成本值小于原SQL的成本值时,Oracle才会对目标SQL做连接谓词推入。

Oracle是否能做连接谓词推入与目标视图的类型、该视图与外部查询之间的连接类型以及连接方法有关。到目前为止,Oracle仅仅支持对如下类型的视图做连接谓词推入。

  • 视图定义SQL语句中包含UNION ALL/UNION的视图

  • 视图定义SQL语句中包含DISTINCT的视图

  • 视图定义SQL语句中包含GROUP BY的视图

  • 和外部查询之间的连接类型是外连接的视图

  • 和外部查询之间的连接类型是反连接的视图

  • 和外部查询之间的连接类型是半连接的视图

看一个连接谓词推入的实例,创建测试表、相关索引和一个普通视图和一个带有UNION ALL的视图

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
scott@TEST> create  table  emp1  as  select  from  emp;
 
Table  created.
 
scott@TEST> create  table  emp2  as  select  from  emp;
 
Table  created.
 
scott@TEST> create  index  idx_emp1  on  emp1(empno);
 
Index  created.
 
scott@TEST> create  index  idx_emp2  on  emp2(empno);
 
Index  created.
 
scott@TEST> create  or  replace  view  emp_view  as 
   2   select  emp1.empno  as  empno1  from  emp1;
 
View  created.
 
scott@TEST> create  or  replace  view  emp_view_union  as
   2   select  emp1.empno  as  empno1  from  emp1
   3   union  all
   4   select  emp2.empno  as  empno1  from  emp2;
 
View  created.

执行测试SQL

1
2
3
4
5
6
7
8
scott@TEST> select  /*+ no_merge(emp_view) */ emp.empno
   2   from  emp,emp_view
   3   where  emp.empno=emp_view.empno1(+)
   4   and  emp.ename= 'FORD' ;
 
      EMPNO
----------
       7902

在上面的SQL中,我们使用了no_merge hint是为了让Oracle不对视图EMP_VIEW做视图合并,这样就具备了做连接谓词推入的基本条件。这里外部查询和视图EMP_VIEW的连接条件为“emp.empno=emp_view.empno1(+)”,由于已经在视图EMP_VIEW的基表EMP1的列EMPNO上创建了索引IDX_EMP1,而且这里的连接类型又是外连接,根据前面的介绍,对于视图EMP_VIEW而言,所有能做连接谓词推入的条件都已具备,Oracle在执行上面的SQL时会考虑做连接谓词推入。如果做连接谓词推入,执行计划就会 走嵌套循环外连接并且访问视图EMP_VIEW的基表EMP1时会使用列EMPNO上的索引IDX_EMP1。

wKiom1jFCEDhvanbAABNzKuYWHU391.png

从执行计划上可以看出,Oracle在执行测试SQL时确实走的是嵌套循环外连接,并且访问视图EMP_VIEW的基表EMP1时用到了索引IDX_EMP1。而且Id=3的执行步骤上Name列的值是“EMP_VIEW”,Operation列的值是“VIEW PUSHED PREDICATE”。这说明Oracle确实没有对视图EMP_VIEW做视图合并,而是把它当作一个独立的执行单元来单独执行,并且把外部查询和视图EMP_VIEW之间的连接条件“emp.empno=emp_view.empno1(+)”推入到了视图的定义语句内部。

如果不做连接谓词推入,那Oracle在访问视图EMP_VIEW的基表EMP1时就只能做全表扫描了。在测试SQL中加入no_push_pred hint(让优化器不要对视图EMP_VIEW做连接谓词推入)再次执行

1
2
3
4
5
6
7
8
scott@TEST> select  /*+ no_merge(emp_view) no_push_pred(emp_view) */ emp.empno
   2   from  emp,emp_view
   3   where  emp.empno=emp_view.empno1(+)
   4   and  emp.ename= 'FORD' ;
 
      EMPNO
----------
       7902

wKioL1jFCy2ioDq5AABDWHmpFFg163.png执行计划已经变为了HASH JOIN OUTER,而且对EMP_VIEW的基表EMP1确实用的是全表扫描。

现在把测试SQL改一下,把EMP_VIEW用EMP_VIEW_UNION视图替换,并把连接类型改为内连接,再次执行

1
2
3
4
5
6
7
8
9
scott@TEST> select  emp.empno
   2   from  emp,emp_view_union
   3   where  emp.empno=emp_view_union.empno1
   4   and  emp.ename= 'FORD' ;
 
      EMPNO
----------
       7902
       7902

视图EMP_VIEW_UNION的定义SQL语句中包含UNION ALL,它本身就不能做视图合并,因而具备了做连接谓词推入的基本条件。这里外部查询和视图EMP_VIEW_UNION的连接条件为“emp.empno=emp_view_union.empno1”视图对基表上的EMPNO列都有索引,虽然这里的连接类型是内连接,但对于包含UNION ALL的视图EMP_VIEW_UNION而言,所有能作连接谓词推入的条件都已具备,意味着Oracle地执行上述SQL时做考虑做连接谓词推入。如果做连接谓词推入,那执行计划就会走嵌套循环连接,并且访问视图的基表会用上列EMPNO上的索引。

wKiom1jFDRnwBei4AABPpd24qCs026.png从执行计划中可以看出,Oracle走的执行计划与预想的一样。

在SQL中加入no_push_pred hint(让优化器不要对视图EMP_VIEW做连接谓词推入)再次执行

1
2
3
4
5
6
7
8
9
scott@TEST> select  /*+ no_push_pred(emp_view_union) */emp.empno
   2   from  emp,emp_view_union
   3   where  emp.empno=emp_view_union.empno1
   4   and  emp.ename= 'FORD' ;
 
      EMPNO
----------
       7902
       7902

wKioL1jFDhqwjiz0AABQe02iOwQ174.png从执行计划可以看出,不使用连接谓词推入,则对视图的基表做的是全表扫描。

之前提到过,Oracle在做连接谓词推入时会考虑成本,只有经过连接谓词推入后走嵌套循环连接的等价改写SQL的成本值小于原SQL的成本值时,Oracle才会对目标SQL做连接谓词推入。

现在来验证一下,在上面的SQL中加入cardinality hint,让CBO认为外围查询的结果集的Cardinality是1万,这样就会急剧增加做连接谓词推入后的嵌套循环连接的成本,如果Oracle在做连接谓词推入是确实会考虑成本,那么此时Oracle就一定不会再选择做连接谓词推入。

1
2
3
4
5
6
7
8
9
scott@TEST> select  /*+ cardinality(emp 10000) */emp.empno
   2   from  emp,emp_view_union
   3   where  emp.empno=emp_view_union.empno1
   4   and  emp.ename= 'FORD' ;
 
      EMPNO
----------
       7902
       7902

wKioL1jFECnwwmWMAABQOeTi_Sg264.png

1
2
3
4
5
6
7
8
9
scott@TEST> select  /*+ cardinality(emp 10000) push_pred(emp_view_union) */emp.empno
   2   from  emp,emp_view_union
   3   where  emp.empno=emp_view_union.empno1
   4   and  emp.ename= 'FORD' ;
 
      EMPNO
----------
       7902
       7902

wKiom1jFEDqz5GsmAABYll0j4ac217.png从上面的测试可以看出使用cardinality hint后Oracle没有选择做连接谓词推入,此时的成本为10,使用push_pred强制做连接谓词推入,看到成本为20008。这也验证了之前说的Oracle在做连接谓词推入会考虑成本。

下面再看使用了内嵌视图且连接类型为外连接的示例:

1
2
3
4
5
6
7
8
scott@TEST> select  /*+ no_merge(emp_view_inline) */ emp.empno
   2   from  emp,( select  emp1.empno  as  empno1  from  emp1) emp_view_inline
   3   where  emp.empno=emp_view_inline.empno1(+)
   4   and  emp.ename= 'FORD' ;
 
      EMPNO
----------
       7902

wKiom1jFEdeQOQt1AABJAsoD2BM714.png对于上面的SQL,所有能做连接谓词推入的条件都已具备,从执行计划中也可以看出Oracle确实也做了连接谓词推入。

再回到一开始执行的SQL,把外连接改为内连接,并在其中加入push_pred hint(让优化器对视图EMP_VIEW做连接谓词推入)和USE_NL hint

1
2
3
4
5
6
7
8
scott@TEST> select  /*+ no_merge(emp_view) use_nl(emp_view) push_pred(emp_view) */ emp.empno
   2   from  emp,emp_view
   3   where  emp.empno=emp_view.empno1
   4   and  emp.ename= 'FORD' ;
 
      EMPNO
----------
       7902

wKioL1jFEkSiCKs0AABB9k1Ta0g175.png

从执行计划来看,Oracle没有做连接谓词推入,因为它不属于开关提到的那几种能做连接谓词推入的情形,即使使用了Hint也不行。

虽然Oracle是否能做连接谓词推入与目标视图是否能做视图合并、是否是内嵌视图没有关系,但是与目标视图的类型、与外查询之间的连接类型及连接方法是有关系的。到目前为止,Oracle里能做连接谓词推入的情形公限于开头提到的那几种类型,如果不属于这些情形,即便是看起来很简单,Oracle也不会做。

参考《基于Oracle的SQL优化》

官方文档:http://docs.oracle.com/cd/E11882_01/server.112/e41573/optimops.htm#i55050




      本文转自hbxztc 51CTO博客,原文链接http://blog.51cto.com/hbxztc/1905643:,如需转载请自行联系原作者





相关文章
|
9月前
|
Oracle 关系型数据库 Linux
【YashanDB 知识库】通过 dblink 查询 Oracle 数据时报 YAS-07301 异常
客户在使用 YashanDB 通过 yasql 查询 Oracle 数据时,遇到 `YAS-07301 external module timeout` 异常,导致 dblink 功能无法正常使用,影响所有 YashanDB 版本。原因是操作系统资源紧张,无法 fork 新子进程。解决方法包括释放内存、停掉不必要的进程或增大进程数上限。分析发现异常源于 system() 函数调用失败,返回 -1,通常是因为 fork() 失败。未来 YashanDB 将优化日志信息以更好地诊断类似问题。
|
7月前
|
Oracle 安全 关系型数据库
【Oracle】使用Navicat Premium连接Oracle数据库两种方法
以上就是两种使用Navicat Premium连接Oracle数据库的方法介绍,希望对你有所帮助!
1540 28
|
8月前
|
Oracle 关系型数据库 数据库
【赵渝强老师】Oracle的闪回版本查询
本文介绍了Oracle数据库的闪回版本查询(Flashback Version Query)功能,通过示例详细讲解了其使用方法。闪回版本查询可获取指定时间区间内行的不同版本,利用`versions between`子句实现。文中包含视频讲解,并通过创建测试表、插入数据及执行查询等步骤,演示如何获取历史版本信息和伪列详情,帮助用户深入了解该功能的实际应用。
190 13
|
7月前
|
SQL Oracle 关系型数据库
【赵渝强老师】Oracle的闪回事务查询
Oracle数据库的闪回事务查询(Flashback Transaction Query)是闪回版本查询的扩充,可用于审计或撤销已提交的事务。通过`flashback_transaction_query`视图,可生成还原特定事务的SQL语句。本文介绍了其基本概念,并通过实战演示如何使用该功能:从授权、开启UNDO数据增强,到创建测试表和事务,最后利用闪回查询撤销已提交的事务,验证数据恢复效果。附带视频讲解,帮助深入理解。
211 3
|
8月前
|
Oracle 关系型数据库 Linux
【YashanDB知识库】通过dblink查询Oracle数据时报YAS-07301异常
【YashanDB知识库】通过dblink查询Oracle数据时报YAS-07301异常
|
8月前
|
Oracle 关系型数据库 MySQL
【YashanDB知识库】oracle dblink varchar类型查询报错记录
这篇文章主要介绍了 Oracle DBLINK 查询崖山 DB 报错的相关内容,包括 ODBC 安装配置、数据源配置、dblink 环境配置、问题原因分析及规避方法。问题原因是 dblink 连接其他数据库时 varchar 类型转换导致的,还介绍了 long 类型限制、char 等类型区别,规避方法是修改参数 MAX_STRING_SIZE 支持 32K。
|
9月前
|
Oracle 关系型数据库 Linux
【YashanDB 知识库】通过 dblink 查询 Oracle 数据时报 YAS-07301 异常
某客户在使用 YashanDB 通过 yasql 查询 Oracle 数据时,遇到 `YAS-07301 external module timeout` 异常,导致 dblink 功能无法正常使用,影响所有版本。问题源于操作系统资源紧张,无法 fork 新子进程。解决方法包括释放内存、停掉不必要的进程或增大进程数上限。分析发现异常原因为系统调用 fork() 失败。经验总结:优化日志记录,提供更多异常信息。
|
Oracle 关系型数据库 数据库
已解决:idea 连接 oracle 数据库 避雷
已解决:idea 连接 oracle 数据库 避雷
203 2
|
10月前
|
Oracle 关系型数据库 数据库
【YashanDB知识库】oracle dblink varchar类型查询报错记录
在使用Oracle DBLink查询VARCHAR类型数据时,可能会遇到多种报错。通过了解常见错误原因,采取合适的解决方法,可以有效避免和处理这些错误。希望本文提供的分析和示例能帮助你在实际工作中更好地处理DBLink查询问题。
326 10
|
10月前
|
SQL Oracle 关系型数据库
如何在 Oracle 中配置和使用 SQL Profiles 来优化查询性能?
在 Oracle 数据库中,SQL Profiles 是优化查询性能的工具,通过提供额外统计信息帮助生成更有效的执行计划。配置和使用步骤包括:1. 启用自动 SQL 调优;2. 手动创建 SQL Profile,涉及收集、执行调优任务、查看报告及应用建议;3. 验证效果;4. 使用 `DBA_SQL_PROFILES` 视图管理 Profile。

热门文章

最新文章

推荐镜像

更多