一区二区三区在线-一区二区三区亚洲视频-一区二区三区亚洲-一区二区三区午夜-一区二区三区四区在线视频-一区二区三区四区在线免费观看

服務器之家:專注于服務器技術及軟件下載分享
分類導航

Mysql|Sql Server|Oracle|Redis|MongoDB|PostgreSQL|Sqlite|DB2|mariadb|Access|數據庫技術|

服務器之家 - 數據庫 - PostgreSQL - 使用Postgresql 實現快速插入測試數據

使用Postgresql 實現快速插入測試數據

2021-03-09 20:06kmblack1 PostgreSQL

這篇文章主要介紹了使用Postgresql 實現快速插入測試數據,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧

1.創建常規的企業信息表

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
create table t_centerprises(
 objectid bigint not null, /*唯一編號(6位行政區號+6位sn)*/
 divid uuid not null, /*行政區唯一代碼*/
 name text not null, /*企業名稱*/
 address text not null, /*企業地址*/
 post text, /*企業郵編*/
 contacts text, /*聯系人*/
 tel text, /*聯系電話*/
 fax text, /*傳真*/
 describe text, /*企業備注*/
 date timestamp default now() not null, /*創建日期*/
 constraint pk_centerprisess_objectid primary key (objectid),
 constraint fk_centerprises_divid foreign key(divid) references ts_divisions(objectid) on delete cascade
);
create index idx_centerprises_divid on t_centerprises(divid);

2.需要使用的函數

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
/*轉換16進制到字符*/
drop function if exists hex_to_string(text);
create or replace function hex_to_string( text)
 returns text as
$$
 declare
 result text;
 begin
 execute 'select U&''\' || $1 || '''' INTO result;
 return result;
 end;
$$ language plpgsql;
 
/*隨機生成漢字
 漢字范圍U+4E00..U+9FA5
*/
drop function if exists gen_random_zh(int,int);
create or replace function gen_random_zh(imin int,imax int)
 returns text as
$$
 declare
 vlen integer;
 result text;
 begin
 result := '';
 vlen = floor(random()*(imax-imin)+imin);
 for i in 1..vlen loop
  result := result || hex_to_string(to_hex(floor(random()*(42191-19968)+19968)::integer));
 end loop;
 return result;
 end;
$$ language plpgsql;

3.常規測試數據插入(5000000條)

?
1
2
3
4
5
6
7
insert into t_centerprises(objectid,divid,name,address,post,contacts,tel,fax,describe)
  select (vdivid|| lpad(id::text,6,'0'))::bigint as objectid,'110101',
  gen_random_zh(5,25) as name,gen_random_zh(10,50) as address,
  floor(random()*(699999-600000)+600000) as post,gen_random_zh(2,8) as contacts,
  floor(random()*(69999999-60000000)+60000000) as tel,floor(random()*(69999999-60000000)+60000000) as fax,
  gen_random_zh(32,128) as describe
 from generate_series(1,5000000) as id;

在普通pc機上插入,大概完成時間約8小時,過程不可監控,并且cpu/內存占用率高,磁盤基本滿負荷動作,讀寫率基本上都是100%.

4.改進后的方法, 插入(10000000條)

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
do $$
 declare vStart bigint;
 declare vEnd bigint;
 declare MAXVALE bigint;
 declare INTERVAL bigint;
 declare vprovince integer;
 declare vprefecture integer;
 declare vcounty integer;
 declare vdivid text;
 declare vdividex uuid;
begin
 vprovince := 10;vprefecture := 1;vcounty := 1;
 
 MAXVALE := 1000000;
 INTERVAL := 1000; vStart := 1 ;vEnd := INTERVAL;
 vdivid := (lpad(vprovince::text,2,'0') || lpad(vprefecture::text,2,'0') || lpad(vcounty::text,2,'0'))::text;
 vdividex := (select objectid from ts_divisions where province=vprovince and prefecture=vprefecture and county=vcounty);
 loop
 insert into t_centerprises(objectid,divid,name,address,post,contacts,tel,fax,describe)
  select (vdivid|| lpad(id::text,6,'0'))::bigint as objectid,vdividex as divid,
  gen_random_zh(5,25) as name,gen_random_zh(10,50) as address,
  floor(random()*(699999-600000)+600000) as post,gen_random_zh(2,8) as contacts,
  floor(random()*(69999999-60000000)+60000000) as tel,floor(random()*(69999999-60000000)+60000000) as fax,
  gen_random_zh(32,128) as describe
 from generate_series(vStart,vEnd) as id;
 
 raise notice '%', vEnd;
 vStart := vEnd + 1; vEnd := vEnd + INTERVAL;
 if( vEnd > MAXVALE ) then
  return;
 elsif(vEnd = MAXVALE) then
  vEnd := vEnd - 1;
 end if;
 end loop;
end$$;

因為運算原因, cpu/內存占用率仍然很高, 硬盤負荷較小,讀寫率也比較低,大概完成時間約1.5小時.

補充:postgreSQL數據庫 向表中快速插入1000000條數據

不用創建函數,直接向表中快速插入1000000條數據

?
1
2
3
create table tbl_test (id int, info text, c_time timestamp);
insert into tbl_test select generate_series(1,100000),md5(random()::text),clock_timestamp();
select count(id) from tbl_test; --查看個數據條數

使用Postgresql 實現快速插入測試數據

以上為個人經驗,希望能給大家一個參考,也希望大家多多支持服務器之家。如有錯誤或未考慮完全的地方,望不吝賜教。

原文鏈接:https://blog.csdn.net/kmblack1/article/details/69666667

延伸 · 閱讀

精彩推薦
主站蜘蛛池模板: 婷婷日日夜夜 | 99最新网址 | 日韩黄色影视 | 亚洲福利一区 | 亚洲精品卡一卡2卡3卡4卡 | 日本公与妇中文在线 | 久久精品一区二区免费看 | 6080欧美一区二区三区四区 | 男生同性啪视频在线观看 | 久草在线精彩免费视频 | 国产欧美日韩一区二区三区在线 | 全黄h全肉细节修仙玄幻文 全彩调教侵犯h本子全彩妖气he | 久久机热视频 这里只有精品首页 | 无人区在线观看免费国语完整版 | caonila国产在线观看 | 国产尤物视频 | 日本中文字幕一区二区高清在线 | 日韩精品一区二区三区中文在线 | 美女把小内内脱个精光打屁屁 | 亚洲看片lutube在线入口 | 99re热这里只有精品视频 | 亚洲天堂三区 | jzzjlzz亚洲乱熟在线播放 | 色香视频在线 | 国产精品久久久久久久久久久久久久 | 青柠影视在线播放观看高清 | 午夜亚洲国产 | 精品蜜臀AV在线天堂 | 无套内射在线观看THEPORN | 日韩欧美亚洲国产高清在线 | 丝袜护士强制脚足取精 | 1024国产基地永久免费 | fistingvideos头交尿眼 | 国产99视频精品免费视频免里 | 无遮掩60分钟从头啪到尾 | 久久精品亚洲热综合一本 | 亚洲欧美天堂 | mmkk在线看片 | 1024日韩基地 | 欧美牛逼aa | 国产第一草草影院 |