Oracle Proc编程性能优化经验

 

Proc 是Oracle提供的一种数据库操做的AP。它是基于ESql技术的，须要预编译后才能够变成普通c代码，很是不直观，使用起来不太方便，阅读也存在困难。

由于这些问题致使程序员平时开发中会出现一些Proc操做存在效率低下的状况，本文介绍一些Proc一些编译经验，但愿能给你们提供参考。

 

下面以一个简单需求进行举例说明：

要求把DB1里面一张数据表tbl_hch_test的数据导出到DB2的同名表。

最快的方法固然是使用oracle的数据泵工具进行压缩导出再导入，但expdp/impdp对数据库环境有特别要求，因此咱们须要使用Proc编程，先从DB1取出数据，再insert到Db2里面。

 

简单实现：

打开一个游标，从DB1循环FETCH数据出来，再使用sprintf拼装成insert语句，到DB2使用exec sql指令执行插入并提交数据库。

 

优化：

虽然上面的作法能够完成需求，但在效率上存在不优化空间。下面依次进行介绍：

1 使用绑定变量代替sprintf拼装sql

       实践证实sprintf函数在对效率要求比较高的场景下容易成为性能瓶颈，使用绑定变量能够避免sprintf调用。

       而且，因为数据库里面执行的sql是相同的，不须要每次从新分析sql生成执行计划，也能大大减轻数据库负担，提升执行效率。

 

2 对insert语句进行预编译，一次编译屡次执行，避免使用隐性游标，每次都要从新编译。

       同上，预编译是比较消耗cpu的操做。若是sql相同，能够复用游标，减小性能开支。

3 使用批量操做，每次取数和插入数据都使用数组进行绑定。

       批量操做能够减小客户端与服务器之间交互次数，加快操做数据。

4 适当加大事务提交间隔（insert多行记录commit一次）

       Oracle提交数据库事务时须要将日志从内存刷回磁盘并等待磁盘操做完成才返回，提升事务提交间隔能够减小等待消耗。

 

优化先后效率测试对比：

 

相同的操做，从23s下降到1.3s

 

其它提升效率措施：

以上是在编程上的一些优化，结合oracle一些特性，速度还能再提高，简单介绍几个优化技巧：

1 先删除目标表索引，insert完数据后再重建

2 关闭表的日志， 减小redo日志，alter table tbl_hch_test nologing。装载完数据再改回来。

3 使用append HINT，在高水位上面直接插入数据，加快插入速度。

4 使用并行（parallel）查询，或者使用分区查询（select * from tab parttion(par_name)）加快查询速度。

5 若是可能，尽可能在数据库服务器上执行程序，减小网络传输开销

 

 

关键代码参考：

 

 

 

 

 

 

 

 

 

 

另外，附上几个平时使用Proc容易出现误区。

1 使用char数组保存数据库varchar2类型字段的值

       Proc的char数组对应的数据库类型是char，varchar结构体对应的类型才是varchar2。使用char数组保存数据库varchar2类型字段的值，会致使取出的数据像char类型同样，在末尾自动添加空格。

       解决方法可使用EXEC SQL VAR/ EXEC SQL TYPE同等化变量或者数据类型。或者在预编译时指定CHAR_MAP=string一劳永役

 

 

2 须要注意proc的一些命令是预编译命令，只在预编译期间生效，与C语言的宏十分类似。例如如下命令：。

EXEC SQL CONTEXT USE

ESEC SQL Whenever Sqlerror Do

 

下面举一个常见的错误进行说明：

 

要彻底搞明白proc的原理，建议多分析.pc文件与porc预编译后生成的.c文件代码区别。

 

3 proc指针变量

Proc能够正确识别指针与普通变量，使用指针作为绑定变量与使用普通变量的方法同样，在变量前面加上冒号便可。

官方文档是这样说的：

 

 

 

有一些程序员不清楚怎么在proc使用指针，会使用memcpy把数据复制多一遍，增长无谓消耗。

 

 

 

4 proc与C语言宏

Proc能识别C语言的一些简单的宏，但若是有复杂的宏（如不定参数宏），proc在预编译时会报错。

此时能够考虑使用gcc –E先对.pc文件进行预处理，以后再使用proc进行预编译。

 

 

 

若是对于proc编程还有什么其它疑惑的地方，欢迎你们与我讨论，或者查阅官方帮助文档。《Oracle Proc官方文档.pdf》