• 企业400电话
  • 微网小程序
  • AI电话机器人
  • 电商代运营
  • 全 部 栏 目

    企业400电话 网络优化推广 AI电话机器人 呼叫中心 网站建设 商标✡知产 微网小程序 电商运营 彩铃•短信 增值拓展业务
    浅谈PL/SQL批处理语句:BULK COLLECT与FORALL对优化做出的贡献
    我们知道PL/SQL程序中运行SQL语句是存在开销的,因为SQL语句是要提交给SQL引擎处理
    这种在PL/SQL引擎和SQL引擎之间的控制转移叫做上下文却换,每次却换时,都有额外的开销

    请看下图:

    但是,FORALL和BULK COLLECT可以让PL/SQL引擎把多个上下文却换压缩成一个,这使得在PL/SQL中的要处理多行记录的SQL语句执行的花费时间骤降
    请再看下图:

    下面详解这爷俩

    ㈠ 通过BULK COLLECT 加速查询

    ⑴ BULK COLLECT 的用法


    采用BULK COLLECT可以将查询结果一次性地加载到collections中,而不是通过cursor一条一条地处理
    可以在select into ,fetch into , returning into语句使用BULK COLLECT
    注意在使用BULK COLLECT时,所有的INTO变量都必须是collections

    举几个简单例子:

    ① 在select into语句中使用bulk collect

    复制代码 代码如下:

    DECLARE
    TYPE sallist IS TABLE OF employees.salary%TYPE;
    sals sallist;
    BEGIN
    SELECT salary BULK COLLECT INTO sals FROM employees where rownum=50;
    --接下来使用集合中的数据
    END;
    /

    ② 在fetch into中使用bulk collect

    复制代码 代码如下:

    DECLARE
    TYPE deptrectab IS TABLE OF departments%ROWTYPE;
    dept_recs deptrectab;
    CURSOR cur IS SELECT department_id,department_name FROM departments where department_id>10;
    BEGIN
    OPEN cur;
    FETCH cur BULK COLLECT INTO dept_recs;
    --接下来使用集合中的数据
    END;
    /

    ③ 在returning into中使用bulk collect

    复制代码 代码如下:

    CREATE TABLE emp AS SELECT * FROM employees;

    DECLARE
    TYPE numlist IS TABLE OF employees.employee_id%TYPE;
    enums numlist;
    TYPE namelist IS TABLE OF employees.last_name%TYPE;
    names namelist;
    BEGIN
    DELETE emp WHERE department_id=30
    RETURNING employee_id,last_name BULK COLLECT INTO enums,names;
    DBMS_OUTPUT.PUT_LINE('deleted'||SQL%ROWCOUNT||'rows:');
    FOR i IN enums.FIRST .. enums.LAST
    LOOP
    DBMS_OUTPUT.PUT_LINE('employee#'||enums(i)||':'||names(i));
    END LOOP;
    END;
    /

    deleted6rows:
    employee#114:Raphaely
    employee#115:Khoo
    employee#116:Baida
    employee#117:Tobias
    employee#118:Himuro
    employee#119:Colmenares

    EATE TABLE emp AS SELECT * FROM employees;DECLARE TYPE numlist IS TABLE OF employees.employee_id%TYPE; enums numlist; TYPE namelist IS TABLE OF employees.last_name%TYPE; names namelist;BEGIN DELETE emp WHERE department_id=30 RETURNING employee_id,last_name BULK COLLECT INTO enums,names; DBMS_OUTPUT.PUT_LINE('deleted'||SQL%ROWCOUNT||'rows:'); FOR i IN enums.FIRST .. enums.LAST LOOP DBMS_OUTPUT.PUT_LINE('employee#'||enums(i)||':'||names(i)); END LOOP;END;/deleted6rows:employee#114:Raphaelyemployee#115:Khooemployee#116:Baidaemployee#117:Tobiasemployee#118:Himuroemployee#119:Colmenares


    ⑵ BULK COLLECT 对大数据DELETE UPDATE的优化

    这里举DELETE就可以了,UPDATE同理

    举个案例:
    需要在一个1亿行的大表中,删除1千万行数据
    需求是在对数据库其他应用影响最小的情况下,以最快的速度完成

    如果业务无法停止的话,可以参考下列思路:
    根据ROWID分片、再利用Rowid排序、批量处理、回表删除
    在业务无法停止的时候,选择这种方式,的确是最好的
    一般可以控制在每一万行以内提交一次,不会对回滚段造成太大压力
    我在做大DML时,通常选择一两千行一提交
    选择业务低峰时做,对应用也不至于有太大影响
    代码如下:

    复制代码 代码如下:

    DECLARE
    --按rowid排序的cursor
    --删除条件是oo=xx,这个需根据实际情况来定
    CURSOR mycursor IS SELECT rowid FROM t WHERE OO=XX ORDER BY rowid;
    TYPE rowid_table_type IS TABLE OF rowid index by pls_integer;
    v_rowid rowid_table_type;
    BEGIN
    OPEN mycursor;
    LOOP
    FETCH mycursor BULK COLLECT INTO v_rowid LIMIT 5000;--5000行提交一次
    EXIT WHEN v_rowid.count=0;
    FORALL i IN v_rowid.FIRST..v_rowid.LAST
    DELETE t WHERE rowid=v_rowid(i);
    COMMIT;
    END LOOP;
    CLOSE mycursor;
    END;
    /

    ⑶ 限制BULK COLLECT 提取的记录数

    语法:
    FETCH cursor BULK COLLECT INTO ...[LIMIT rows];
    其中,rows可以是常量,变量或者求值的结果是整数的表达式

    假设你需要查询并处理1W行数据,你可以用BULK COLLECT一次取出所有行,然后填充到一个非常大的集合中
    可是,这种方法会消耗该会话的大量PGA,APP可能会因为PGA换页而导致性能下降

    这时,LIMIT子句就非常有用,它可以帮助我们控制程序用多大内存来处理数据

    例子:

    复制代码 代码如下:

    DECLARE
    CURSOR allrows_cur IS SELECT * FROM employees;
    TYPE employee_aat IS TABLE OF allrows_cur%ROWTYPE INDEX BY BINARY_INTEGER;
    v_emp employee_aat;
    BEGIN
    OPEN allrows_cur;
    LOOP
    FETCH allrows_cur BULK FETCH INTO v_emp LIMIT 100;

    /*通过扫描集合对数据进行处理*/
    FOR i IN 1 .. v_emp.count
    LOOP
    upgrade_employee_status(v_emp(i).employee_id);
    END LOOP;

    EXIT WHEN allrows_cur%NOTFOUND;
    END LOOP;

    CLOSE allrows_cur;
    END;
    /

    ⑷ 批量提取多列

    需求:
    提取transportation表中的油耗小于 20公里/RMB的交通具体的全部信息
    代码如下:

    复制代码 代码如下:

    DECLARE
    --声明集合类型
    TYPE vehtab IS TABLE OF transportation%ROWTYPE;
    --初始化一个这个类型的集合
    gas_quzzlers vehtab;
    BEGIN
    SELECT * BULK COLLECT INTO gas_quzzlers FROM transportation WHERE mileage 20;
    ...

    ⑸ 对批量操作使用RETURNING子句

    有了returning子句后,我们可以轻松地确定刚刚完成的DML操作的结果,无须再做额外的查询工作
    例子请见BULK COLLECT 的用法的第三小点


    ㈡ 通过FORALL 加速DML

    FORALL告诉PL/SQL引擎要先把一个或多个集合的所有成员都绑定到SQL语句中,然后再把语句发送给SQL引擎

    ⑴ 语法

    未完待续。。。

    您可能感兴趣的文章:
    • 开启SQLSERVER数据库缓存依赖优化网站性能
    • SQLServer 优化SQL语句 in 和not in的替代方案
    • SQL语句优化方法30例(推荐)
    • SQL Server数据库的高性能优化经验总结
    • MySQL 大数据量快速插入方法和语句优化分享
    • MySQL性能优化的一些技巧帮助你的数据库
    • MySQL查询优化:连接查询排序limit(join、order by、limit语句)介绍
    • 浅谈MySQL中优化sql语句查询常用的30种方法
    • 如何优化SQL语句的心得浅谈
    • SQL语句优化提高数据库性能
    上一篇:AWR 深入分析( Automatic Workload Repository )
    下一篇:Oracle中 关于数据库存储过程和存储函数的使用
  • 相关文章
  • 

    © 2016-2020 巨人网络通讯 版权所有

    《增值电信业务经营许可证》 苏ICP备15040257号-8

    浅谈PL/SQL批处理语句:BULK COLLECT与FORALL对优化做出的贡献 浅谈,SQL,批处理,语句,BULK,