PL/SQL - where子句中的可选条件 - 没有动态sql?

Fru*_*ner 10 oracle plsql dynamic-sql oracle10g

我有一个查询,其中并非所有条件都是必要的.以下是使用所有条件时的示例:

select num
from (select distinct q.num
       from cqqv q
       where q.bcode = '1234567' --this is variable
             and q.lb = 'AXCT' --this is variable
             and q.type = 'privt' --this is variable
             and q.edate > sysdate - 30 --this is variable
       order by dbms_random.value()) subq
where rownum <= 10; --this is variable
Run Code Online (Sandbox Code Playgroud)

标记为--this is variable的部件是变化的部件!如果未指定条件,则没有默认值.例如,如果输入为q.type指定"*"(但保留其他所有内容相同),则查询应匹配类型的所有内容,并执行为:

select num
from (select distinct q.num
       from cqqv q
       where q.bcode = '1234567' --this is variable
             and q.lb = 'AXCT' --this is variable
             --and q.type = 'privt' --this condition ignored because of "type=*" in input
             and q.edate > sysdate - 30 --this is variable
       order by dbms_random.value()) subq
where rownum <= 10; --this is variable
Run Code Online (Sandbox Code Playgroud)

我知道可以动态使用动态sql来构建这个查询,但我想知道这会导致什么样的性能问题,以及是否有更好的方法来做到这一点.

Ton*_*ews 12

虽然你可以这样做......

select num
from (select distinct q.num
       from cqqv q
       where 1=1
             and (:bcode is null or q.bcode = :bcode)
             and (:lb is null or q.lb = :lb)
             and (:type is null or q.type = :type)
             and (:edate is null or q.edate > :edate - 30)
       order by dbms_random.value()) subq
where rownum <= :numrows
Run Code Online (Sandbox Code Playgroud)

...使用动态SQL的性能通常会更好,因为它会生成更有针对性的查询计划.在上面的查询中,Oracle无法判断是使用bcode或lb上的索引还是键入或编辑,并且每次都可能执行全表扫描.

当然,您必须在动态查询中使用绑定变量,而不是将字面值连接到字符串中,否则性能(以及可伸缩性和安全性)将非常糟糕.

要清楚,我想到的动态版本将如下工作:

declare
    rc sys_refcursor;
    q long;
begin
    q := 'select num
    from (select distinct q.num
           from cqqv q
           where 1=1';

    if p_bcode is not null then
        q := q || 'and q.bcode = :bcode';
    else
        q := q || 'and (1=1 or :bcode is null)';
    end if;

    if p_lb is not null then
        q := q || 'and q.lb = :lb';
    else
        q := q || 'and (1=1 or :lb is null)';
    end if;

    if p_type is not null then
        q := q || 'and q.type = :type';
    else
        q := q || 'and (1=1 or :type is null)';
    end if;

    if p_edate is not null then
        q := q || 'and q.edate = :edate';
    else
        q := q || 'and (1=1 or :edate is null)';
    end if;

    q := q || ' order by dbms_random.value()) subq
    where rownum <= :numrows';

    open rc for q using p_bcode, p_lb, p_type, p_edate, p_numrows;
    return rc;
end;
Run Code Online (Sandbox Code Playgroud)

这意味着结果查询是"sargable"(对我来说,我必须承认一个新词!)因为生成的查询运行将是(例如):

select num
from (select distinct q.num
       from cqqv q
       where 1=1
             and q.bcode = :bcode
             and q.lb = :lb
             and (1=1 or :type is null)
             and (1=1 or :edate is null)
       order by dbms_random.value()) subq
where rownum <= :numrows
Run Code Online (Sandbox Code Playgroud)

但是,我接受在这个例子中这可能需要多达16个硬解析.使用本机动态SQL时,"and:bv为null"子句是必需的,但可以使用DBMS_SQL来避免.

注意:在(1=1 or :bindvar is null)Michal Pravda的评论中建议使用何时绑定变量为null,因为它允许优化器消除该子句.

  • 有一种方法可以改进这个解决方案:不要只使用<code> AND:edate IS NULL </ code>.让优化器在解析/分析阶段开始时从查询中消除它.这可以通过<code> AND(1 = 1或:edate IS NULL)</ code>来完成.通过这种方式,您可以获得OMG Ponies的上下文变量(在where子句中只有"有意义的"条件),而不会产生复杂性和创建上下文的必要性.在某些情况下,对于长时间运行的查询,根本不需要消除绑定.但它很少见,如果你不小心,你很容易受到SQL注入攻击 (2认同)

OMG*_*ies 5

虽然我同意Tony的观点,即使用动态SQL的性能更好,但是上下文变量比使用绑定变量更好.

使用IN_VARIABLE IS NULL OR table.fieldx = IN_VARIABLE对于处理可选值并不理想.每次提交查询时,Oracle首先检查其共享池以查看之前是否已提交该语句.如果有,则检索查询的执行计划并执行SQL.如果在共享池中找不到该语句,Oracle必须完成解析语句的过程,制定各种执行路径并在执行之前提出最佳访问计划(AKA"最佳路径").此过程称为"硬解析",并且可能比查询本身花费更长的时间.在这里阅读有关Oracle硬/软解析的更多信息,以及AskTom.

简而言之 - 这个:

and (:bcode is null or q.bcode = :bcode)
Run Code Online (Sandbox Code Playgroud)

...将执行相同,动态或其他方式.在动态SQL中为可选参数使用绑定变量没有任何好处.该设置仍然破坏了SARGability ......

上下文参数是Oracle 9i中引入的一项功能.它们绑定到一个包,并可用于设置属性值(仅适用于对包具有EXECUTE权限的用户,并且您必须将CREATE CONTEXT授予该模式).上下文变量可用于定制动态SQL,因此它仅包含基于过滤器/搜索条件的查询所需的内容.相比之下,绑定变量(动态SQL中也支持)要求指定一个值,该值可导致IN_VARIABLE IS NULL OR table.fieldx = IN_VARIABLE搜索查询中的测试.在实践中,应为每个程序或功能使用单独的上下文变量,以消除价值污染的风险.

这是使用上下文变量的查询:

L_CURSOR SYS_REFCURSOR;
L_QUERY  VARCHAR2(5000) DEFAULT 'SELECT num
                                   FROM (SELECT DISTINCT q.num
                                           FROM CQQV q
                                          WHERE 1 = 1 ';
BEGIN

    IF IN_BCODE IS NOT NULL THEN
      DBMS_SESSION.SET_CONTEXT('THE_CTX',
                               'BCODE',
                               IN_BCODE);
      L_QUERY := L_QUERY || ' AND q.bcode = SYS_CONTEXT(''THE_CTX'', ''BCODE'') ';
    END IF;

    IF IN_LB IS NOT NULL THEN
      DBMS_SESSION.SET_CONTEXT('THE_CTX',
                               'LB',
                               IN_LB);
      L_QUERY := L_QUERY || ' AND q.lb = SYS_CONTEXT(''THE_CTX'', ''LB'') ';
    END IF;

    IF IN_TYPE IS NOT NULL THEN
      DBMS_SESSION.SET_CONTEXT('THE_CTX',
                               'TYPE',
                               IN_TYPE);
      L_QUERY := L_QUERY || ' AND q.type = SYS_CONTEXT(''THE_CTX'', ''TYPE'') ';
    END IF;

    IF IN_EDATE IS NOT NULL THEN
      DBMS_SESSION.SET_CONTEXT('THE_CTX',
                               'EDATE',
                               IN_EDATE);
      L_QUERY := L_QUERY || ' AND q.edate = SYS_CONTEXT(''THE_CTX'', ''EDATE'') - 30 ';
    END IF;

    L_QUERY := L_QUERY || ' ORDER BY dbms_random.value()) subq
           WHERE rownum <= :numrows ';

    FOR I IN 0 .. (TRUNC(LENGTH(L_QUERY) / 255)) LOOP
      DBMS_OUTPUT.PUT_LINE(SUBSTR(L_QUERY, I * 255 + 1, 255));
    END LOOP;

    OPEN L_CURSOR FOR L_QUERY USING IN_ROWNUM;
    RETURN L_CURSOR;

END;
Run Code Online (Sandbox Code Playgroud)

该示例仍然使用rownum的绑定变量,因为该值不是可选的.

DBMS_SESSION.SET_CONTEXT('THE_CTX', 'LB', IN_LB);
Run Code Online (Sandbox Code Playgroud)

SET_CONTEXT参数如下:

  1. 上下文变量名称.没有涉及实例创建
  2. 上下文变量中的变量.假设熟悉Web应用程序和会话对象,上下文变量就像会话变量.
  3. 参数#2中定义的变量的值.

绑定与上下文

绑定变量意味着Oracle期望填充变量引用 - 否则就是ORA错误.例如:

... L_QUERY USING IN_EXAMPLE_VALUE
Run Code Online (Sandbox Code Playgroud)

...期望有一个单独的绑定变量引用被填充.如果IN_EXAMPLE_VALUE为空,也:variable在查询中.IE:AND :variable IS NULL

使用上下文变量意味着不必包含无关/冗余逻辑,检查值是否为空.

重要信息:绑定变量按发生顺序(称为序数)处理,而不是按名称处理.您会注意到USING子句中没有数据类型声明.普通是不理想的 - 如果你在查询中更改它们而不更新USING子句,它将打破查询,直到它被修复.


Fru*_*ner 3

我选择的解决方案是生成一个动态 SQL 查询,如下所示:

select num
from (select distinct q.NUM
       from cqqv q 
       where  (q.bcode = :bcode) 
                  and  (1=1 or :lb is null) 
                  and  (1=1 or :type is null) 
                  and  (q.edate> :edate) 
                order by dbms_random.value()) subq 
where rownum <= :numrows
Run Code Online (Sandbox Code Playgroud)

(在此示例中,bcode 和 edate 条件不是可选的,但 lb 和 type 是可选的)

我认为这就是(或者非常相似)Michal Pravda 所建议的,我们的 DBA 更喜欢这个解决方案而不是上下文变量解决方案。感谢所有提供帮助和建议的人!

我们的 DBA 找到了一个链接,详细介绍了该解决方案:

问汤姆:关于流行和自然选择