Bulk Collect特性可以让我们在PL/SQL中能使用批查询,批查询在某些情况下能显著提高查询效率。

  • BULK COLLECT 子句会批量检索结果,即一次性将结果集绑定到一个集合变量中,并从SQL引擎发送到PL/SQL引擎。

  • 可以在select into,fetch into,returning into语句使用bulk collect。

  • 注意在使用bulk collect时,所有的into变量都必须是collections。

1. 背景

以前曾经做过一个需求,数据库中有两张表,A表是2千万记录,B表是1千万条记录,它们之间存在某种联系,要求程序将它们关联起来,以A表为基准。

然后就是PL/SQL写了个程序(参考方式一代码),运行巨慢,且会报内存不足(在自己的笔记本上跑的)。后来用了BULK COLLECT,有了很大改善。以前的代码已经没有了运行的环境,代码也只保留了框架下来,贴在这里,做个记号。

方式一,最早的实现方式:

DECLARE
--定义一个RECORD类型用来存储记录,为节省内存,只存储需要处理的字段
TYPE SIM_RECORD is record(
SYSCODE SIM.SYSCODE%TYPE,
CUSNAME SIM.CUSNAME%TYPE,
CUSADDR SIM.CUSADDR%TYPE,
PHONE SIM.PHONE%TYPE
);
V_SIM_RECORD SIM_RECORD; --定义若干用到的其它变量
v_start_syscode number := 1;
v_process_records number := 1000000;
v_count number := 0; --定义游标
CURSOR SIMCursor IS SELECT SYSCODE,CUSNAME,CUSADDR,PHONE
FROM SIM
WHERE SYSCODE>=v_start_syscode AND SYSCODE<v_start_syscode+v_process_records;
BEGIN
  
--打开游标
OPEN SIMCursor;
LOOP
--读取游标
FETCH SIMCursor INTO V_SIM_RECORD;
EXIT WHEN SIMCursor%NOTFOUND; --防止更新出现异常,所以将DML语句进行封装,以避免某条记录出现错误而导致退出循环
BEGIN
--主处理语句,省略
--取得值通过:V_SIM_RECORD.SYSCODE等这样的方式获取 --每处理20000条记录,输出一些统计信息
v_count := v_count+1;
IF mod(v_count,20000)=0 THEN
dbms_output.put_line(V_SIM_RECORD.SYSCODE||'['||v_count||']');
END IF;
EXCEPTION
WHEN OTHERS THEN
dbms_output.put_line('sqlerrm-->' ||sqlerrm);
END;
END LOOP;
--关闭游标
CLOSE SIMCursor;
EXCEPTION
WHEN OTHERS THEN
dbms_output.put_line('sqlerrm-->' ||sqlerrm);
END;

方式二,在select into语句中使用bulk collect

DECLARE
--定义存储数据的数据结构(collections)
TYPE SIM_TABLE IS TABLE OF SIM%ROWTYPE;
T_SIM_TABLE SIM_TABLE; --定义若干用到的其它变量
v_start_syscode number := 1;
v_process_records number := 1000000;
v_count number := 0; BEGIN
--在select into语句中使用bulk collect,一次性取得
SELECT * BULK COLLECT INTO T_SIM_TABLE FROM SIM WHERE SYSCODE>=v_start_syscode AND SYSCODE<v_start_syscode+v_process_records; FOR i IN 1 .. T_SIM_TABLE.count LOOP --防止更新出现异常,所以将DML语句进行封装,以避免某错误记录导致退出循环
BEGIN
--主处理语句,省略
--取得值通过:T_SIM_TABLE(i).PHONE等这样的方式获取 --每处理20000条记录,输出一些统计信息
v_count := v_count+1;
IF mod(v_count,20000)=0 THEN
dbms_output.put_line(T_SIM_TABLE(i).PHONE||'['||v_count||']');
END IF;
EXCEPTION
WHEN OTHERS THEN
dbms_output.put_line('sqlerrm-->' ||sqlerrm);
END; END LOOP;
EXCEPTION
WHEN OTHERS THEN
dbms_output.put_line('sqlerrm-->' ||sqlerrm);
END;

方式三,在fetch into中使用bulk collect

DECLARE
--定义存储数据的数据结构(collections)
TYPE SIM_TABLE IS TABLE OF SIM%ROWTYPE;
T_SIM_TABLE SIM_TABLE; --定义若干用到的其它变量
v_start_syscode number := 1;
v_process_records number := 1000000;
v_count number := 0; --定义游标
CURSOR SIMCursor IS SELECT * FROM SIM where SYSCODE>=v_start_syscode AND SYSCODE<v_start_syscode+v_process_records;
BEGIN
OPEN SIMCursor;
LOOP
EXIT WHEN SIMCursor%NOTFOUND;
--在fetch into中使用bulk collect,分批次取得
FETCH SIMCursor BULK COLLECT INTO T_SIM_TABLE LIMIT 50000; FOR i IN 1 .. T_SIM_TABLE.count LOOP --防止更新出现异常,所以将DML语句进行封装,以避免某错误记录导致退出循环
BEGIN
--主处理语句,省略
--取得值通过:T_SIM_TABLE(i).PHONE等这样的方式获取 --每处理20000条记录,输出一些统计信息
v_count := v_count+1;
IF mod(v_count,20000)=0 THEN
dbms_output.put_line(T_SIM_TABLE(i).PHONE||'['||v_count||']');
END IF;
EXCEPTION
WHEN OTHERS THEN
dbms_output.put_line('sqlerrm-->' ||sqlerrm);
END;
END LOOP; END LOOP;
CLOSE SIMCursor;
EXCEPTION
WHEN OTHERS THEN
dbms_output.put_line('sqlerrm-->' ||sqlerrm);
END;

Oracle学习笔记之五sp1,PL/SQL之BULK COLLECT的更多相关文章

  1. Oracle学习笔记十 使用PL/SQL

    PL/SQL 简介 PL/SQL 是过程语言(Procedural Language)与结构化查询语言(SQL)结合而成的编程语言,是对 SQL 的扩展,它支持多种数据类型,如大对象和集合类型,可使用 ...

  2. oracle学习笔记4:PL/SQL

    PL/SQL是没命名的存储过程,函数,触发器,PL/SQL块的语法格式如下: [declare] --声明部分,可选 begin --执行部分,必须 [exception] --异常处理部分,可选 e ...

  3. Oracle 学习笔记 17 -- 异常处理(PL/SQL)

    程序异常是在操作期间正常,出现在节目的准备过程是不可避免的例外.但是,必须有一个相应的异常处理机 制,以保证程序的正常运行.PL/SQL程序运行过程中出现的错误.称为异常. 一个优秀的程序都应该可以正 ...

  4. Oracle学习笔记之四sp1,Oracle 11g的常用函数

    从Oracle学习笔记之四,SQL语言入门中摘出来的,独立成一章节 3.1 字符类函数 ASCII(c)和CHR(i)    分别用于返回一个字符的ASCII码和返回给定ASCII值所对应的字符. C ...

  5. ORACLE PL/SQL开发--bulk collect的用法 .

    刚刚在inthirties老大的博客里看到这篇文章,写的不错,正好自己最近在学习PL/SQL,转过来学习学习. ============================================ ...

  6. Oracle学习笔记之五,Oracle 11g的PL/SQL入门

    1. PL/SQL概述 PL/SQL(Procedural Language/SQL)是Oracle的专用语言,是对标准SQL语言的扩展,它允许在其内部嵌套普通的SQL语句,还可以定义变量和常量,允许 ...

  7. oracle学习(二)pl/sql基础

    pl/sql组成:DDL DML DCL pl/sql特点: SQL&PL/SQL编译器集成PL/SQL,支持SQL所有范围的语法 支持CASE语句和表达式 继承和动态方法释放 类型进化.属性 ...

  8. oracle 学习(五)pl/sql语言存储过程&包

    首先搞清楚俩概念 存储过程(procedure)&程序包(package) 存储过程:数据库对象之一,可以理解为数据库的子程序,在客户端和服务器端可以直接调用它.触发器是与表直接关联的特殊存储 ...

  9. oracle学习笔记(九) SQL常用函数说明以及使用

    SQL常用函数说明以及使用 以下补充以下常用的函数,更多的请看oracle函数API文档 to_char to_char(8.58,'9.99') to_char(8.50,'9.00') to_ch ...

随机推荐

  1. 如何:使用TreeView控件实现树结构显示及快速查询

    本文主要讲述如何通过使用TreeView控件来实现树结构的显示,以及树节点的快速查找功能.并针对通用树结构的数据结构存储进行一定的分析和设计.通过文本能够了解如何存储层次结构的数据库设计,如何快速使用 ...

  2. Linux内核设计基础(四)之虚拟文件系统

    先来看一下写文件函数write的运行过程: ret = write(fd, buf, len); write适用于各种文件系统.它首先运行sys_write(),而正是这个sys_write()进行实 ...

  3. c#实现统计代码运行时间

    方法一: //实例化一个计时器 Stopwatch watch = new Stopwatch(); //開始计时 watch.Start(); //此处为要计算的执行代码 for (int i = ...

  4. 【Oracle】迁移含有BLOG类型的字段的表

    日常数据库迁移过程中,发现dmp文件中的表,如果表含有blog类型的字段,无法进行迁移. 以下是我迁移含有blog类型字段表的经验分享' 使用PLSQL Developer进行导出 接着选择需要导出的 ...

  5. JSP,servlet和数据库之间传值出现乱码的问题

     近期困扰我非常久的一个问题最终攻克了,为他我头疼了好几天,问题是JSP通过servlet向数据库传值,查询显示在页面的时候出现了乱码,原先我数据库中有两行带有中文的数据,查询的时候倒是没有出现乱 ...

  6. ASP.NET#LinqDataSource控件配置对象模型时遇到的问题

    使用LinqDataSource控件时,配置数据源的时候,发现没有DataContext对象可选,但已通过可视化操作完成了对象模型的建立.这个时候,可以通过现在Default.aspx.cs文件中做如 ...

  7. python函数中把列表(list)当参数时的"入坑"与"出坑"

    在Python函数中,传递的参数如果默认有一个为 列表(list),那么就要注意了,此处有坑!! 入坑 def f(x,li=[]): for i in range(x): li.append(i*i ...

  8. HDUOJ---1863畅通工程

    畅通工程 Time Limit: 1000/1000 MS (Java/Others)    Memory Limit: 32768/32768 K (Java/Others)Total Submis ...

  9. HDUOJ----专题训练

    Problem B Time Limit : 2000/1000ms (Java/Other)   Memory Limit : 131072/65536K (Java/Other) Total Su ...

  10. C# 读写网上邻居中的共享文件

    读写网上邻居共享的文件夹,和操作本地文件夹类似,只要有权限读取写入即可. 分为以下2步: 1.打通共享文件夹权限 2.操作文件 打通共享文件夹权限 /// <summary> /// 连接 ...