如何在十分鍾內插入1億條記錄到Oracle數據庫?


這里提供一種方法,使用 APPEND 提示,使得十分鍾內插入上億數據成為可能。

 

-- Create table

create table TMP_TEST_CHAS_LEE

(

f01 VARCHAR2(20),

f02 NUMBER(10) not null,

f03 VARCHAR2(21),

f04 VARCHAR2(21),

f05 NUMBER,

f06 NUMBER(20)

);

 

--創建一個臨時表,用於提供序列號

CREATE GLOBAL TEMPORARY table t_sequence_num(

sequenceNum number(8) not null

)

ON COMMIT PRESERVE ROWS;

 

 

--開始插入數據

 

begin

--先生成1萬個序號

delete from t_sequence_num;

for i in 0..9999 loop

insert into t_sequence_num(sequenceNum) values(i);

end loop;

 

--使用APPEND提示,每次1萬條,進行數據插入

for i in 1..10 loop

insert /*+ append */ into TMP_TEST_CHAS_LEE

(f01, f02, f03, f04, f05, f06)

select

8613800000000 + i * 10000 + t_sequence_num.sequencenum as MSISDN,

'12106000',

0,

'20120312072000',

'500231891000',

null

from t_sequence_num;

 

--每批次必須要提交一次

commit;

 

end loop;

end;

/

 
可以看出,這種方法的關鍵是使用了 APPEND 提示,也就是使用了 Direct Path Insert.
效果非常驚人,上億的數據,十分鍾左右就搞定了,也就是說,每秒鍾插入了超過10萬條以上的記錄。
 
這個方法很簡單,就是要利用 APPEND提示,方法就是需要有個序列表,來輔助數據生成。
 
性能測試人員不用耗費大量的時間來等待測試數據生成了。
 
需要注意的問題:
1. 插入數據時,表上不要建立索引
2. 可以在數據插入完畢后,通過 nologging 和 parallel 來創建索引
3. 這里默認是1萬條記錄提交一次,可以改的更大,應該會更快
4. APPEND方式插入數據后,必須要提交后才能對表進行其它操作
5. 生成的數據的每個字段都是可以根據自己的需要靈活產生的
 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM