insert into select 批量加载出错解决方案
当使用insert into select 批量加载数据的时候,可能会碰到因为某些数据不符合加载条件,而导致整个insert 语句无法执行,全部rollback。这时可以使用DML 错误日志的特性,解决这个问题。
只需要创建一个日志表,并且在使用dml语句的时候添加dml error logging 语句,即可将错误的rows记录到日志表中,而且不会影响已经加载到表中的数据。最后修正这些无法加载的数据。
操作步骤如下:
1. 创建一个日志表
可以使用DBMS_ERRLOG包创建,或者手动的创建日志表。如果使用dbms_errlog.create_error_log来创建日志表,默认的会将源表的所有列都加入需要记录的行列中。
2. 执行insert ,并且添加error logging 语句。
3. 最后查询日志表,修改无法加载的数据。
以下是一个insert into select 批量加载的例子:
第一步创建日志表
创建测试表target_t
insert into target_t select * from source_t LOGERRORS INTO target_err_log ('daily_load2') REJECT LIMIT 5; 9999 rows created. dexter@ORCL> select count(*) from target_t ; COUNT(*)---------- 9999支持rollbackdexter@ORCL> rollback ; Rollback complete. dexter@ORCL> select count(*) from target_t ; COUNT(*)---------- 0 dexter@ORCL> insert into target_t select *from source_t LOG ERRORS INTO target_err_log ('daily_load2') REJECT LIMIT 5; 9999 rows created. dexter@ORCL> commit ; Commit complete. dexter@ORCL> select count(*) from target_t ; COUNT(*)---------- 9999dexter@ORCL> select count(*) from target_t ; COUNT(*)---------- 15
第三步修改数据
这里我就不多说。
dml error logging 还支持UPDATE, MERGE,DELETE语句。
附录日志表中各字段解读
Column Name Data Type Description
ORA_ERR_NUMBER$ NUMBER Oracle error number
ORA_ERR_MESG$ VARCHAR2(2000) Oracle errormessage text
ORA_ERR_ROWID$ ROWID Rowid of the row inerror (for update and delete)
ORA_ERR_OPTYP$ VARCHAR2(2) Type ofoperation: insert (I), update (U), delete (D)
Note: Errors from the update clause and
insert clause of a MERGEoperation are
distinguished by the Uand Ivalues.
ORA_ERR_TAG$ VARCHAR2(2000) Value of thetag supplied by the user in the error logging clause