Insert into select 与create table as的性能测试及create table

简介: 1. 文档说明 在工作中经常用insert into select 与 create table as语句来进行表单数据的复制;当复制表的数据量很小的时候两个语句的效率区别不大,但当表的数量级别达百万级以上的时候,就会有很明显的效率区别; 本文档也也分...

1. 文档说明

在工作中经常用insert into select create table as语句来进行表单数据的复制;当复制表的数据量很小的时候两个语句的效率区别不大,但当表的数量级别达百万级以上的时候,就会有很明显的效率区别;

本文档也也分成两个部分进行报表数度的测试;

一、 insert into select create table as的效率测试;

二、 create table as方法时性能的调优;

2. Insert into select create table as的性能测试

测试环境:ORACLE版本:10.2.0.2 PGA:1G SGA:1G 数据库:非归档模式

2.1 create tables as的测试,语句:Create Table zz_J_3ABSSI as Select * From J_3ABSSI

测试环境:表J_3ABSSI数据74万,该表没有索引;

执行时间:280S

2.2 Insert into select的测试,语句:

Truncate Table zz_J_3abssi;(先truncate表保留表的结构)

Insert Into zz_J_3abssi ("J_3ABSNR","J_3AHBSP","J_3ABSKZ","J_3AEBSP","WERKS","LIFNR","J_4KSCAT","MATNR","J_3ASIZE","MENGE","DABMG","IAMNG") Select "J_3ABSNR","J_3AHBSP","J_3ABSKZ","J_3AEBSP","WERKS","LIFNR","J_4KSCAT","MATNR","J_3ASIZE","MENGE","DABMG","IAMNG" From sapsr3."J_3ABSSI"

执行时间:1255S

2.2 总结:create table asinsert into select具有更好的性能越提升4倍以上;

原理分析:create table asddl语句,insert into selectdml语句,insert into select每一条记录的时候都会产生undoredo,整个过程相比create table as产生的redoundo相当多,因此整个过程会慢也是正常的;但是create table as使用的前提是目标表的结构不存在才能使用;

当有大量数据的时候不推荐使用Insert into as,因为该语句的插入的效率很慢;

2.3 延伸:网上有朋友在测试的时候增加了nologgingparallel参数,能够提升相应的执行效率;但是在实际中测试中,发现并没有实际效率的提高;

增加了nologging但是数据库还是会写日志,该参数只有在进行直接路径写的时候才有效,关于什么情况下数据库会运行直接路径写,请各位大神网上查询,应该会知道答案;

Parallel提高效率,小弟还没有想明白,请各位大婶帮忙回复;

3. create table as性能的提升

在确定了用create table as的方法进行复制数据的时候,提升该语句的效率成了继续研究的方法;

3.1 分析优化方法:

create table as的语句,该语句主要有两个步骤:

步骤一、读的过程:数据磁盘到sga,然后从sgapga(如果这个时候pga不够大,那么就会写到临时表空间,该步骤相当影响效率);

步骤二、写的过程:写redoundo

3.2 调优方法

a) 增加sgapga的大小,pga1g增大到3gsga1g增加到3g

b) 增加redo log的大小,从当前的50M每个增加到1G每个;

3.3 实验验证

a) 实验结果表明,增加redo log的大小影响速度不大,但还是有稍微的提升(不信的朋友可以测试)

b) 增加sgapga的大小,很明显的提升了整个复制的速度,效果粉吓人,整整提升了10倍;(这里不再贴测试截图,各位看官自己动手测试下,注意表的大小要大于PGA时效果比较显著)

相关实践学习
通过性能测试PTS对云服务器ECS进行规格选择与性能压测
本文为您介绍如何利用性能测试PTS对云服务器ECS进行规格选择与性能压测。
相关文章
|
SQL 存储 测试技术
SQLTest系列之参数化INSERT语句测试
# 场景引入 上文说书到“SQLTest系列之INSERT语句简单测试”,于是,菜鸟想深入了解:“在现实业务场景中,实际的表数据不可能是完全一样的。所以,我们需要完全模拟实际场景,如何将表数据完全参数化的方式来INSERT到表中呢?”。带着问题来研究SQLTest,问题快速的迎刃而解。 # 环境准备 随着研究的深入,菜鸟了解到SQLTest的强大,SQLTest支持将一个存储过程的输出结果集
3016 0
|
SQL 测试技术 Go
SQLTest系列之INSERT语句测试
一款可以测试MSSQL Server的工具,这篇文章主要是分享下SQLTest之Insert语句测试。
6592 0
CTAS和insert append的一个测试
该文章写于2004年,最近刚从以前的blog上迁移出来。 [@more@]8174上的一个测试,非归档模式: 代码: SQL> select * from v$version; BANNER -----------------------------------...
978 0
|
SQL 测试技术 数据库
SQL注入测试平台 SQLol -3.INSERT注入测试
  访问首页的insert模块,http://127.0.0.1/sql/insert.php,开始对insert模块进行测试。 insert语句: INSERT INTO 【users】 (【username】, isadmin) VALUES (【'1'】, 【0】) 接收的参数可能拼接到上述语句中【】的任一个位置。
1229 0
|
Shell 测试技术
物化视图全量刷新与insert的redo生成量测试
之前的一篇博客中提到,物化视图的全量刷新也是一种高可用性的体现,但是性能如何呢,下面来简单的测试一下。 首先需要创建一个函数,这个函数会计算当前session下的一些指标信息。
854 0
|
15天前
|
网络协议 安全 测试技术
性能工具之emqtt-bench BenchMark 测试示例
【4月更文挑战第19天】在前面两篇文章中介绍了emqtt-bench工具和MQTT的入门压测,本文示例 emqtt_bench 对 MQTT Broker 做 Beachmark 测试,让大家对 MQTT消息中间 BenchMark 测试有个整体了解,方便平常在压测工作查阅。
92 6
性能工具之emqtt-bench BenchMark 测试示例
|
27天前
|
测试技术 C语言
网站压力测试工具Siege图文详解
网站压力测试工具Siege图文详解
28 0
|
9天前
|
机器学习/深度学习 数据采集 人工智能
【专栏】利用AI辅助工具提高软件测试效率与准确性
【4月更文挑战第27天】本文探讨了AI在软件测试中的应用,如自动执行测试用例、识别缺陷和优化测试设计。AI辅助工具利用机器学习、自然语言处理和图像识别提高效率,但面临数据质量、模型解释性、维护更新及安全性挑战。未来,AI将更注重用户体验,提升透明度,并在保护隐私的同时,通过联邦学习等技术共享知识。AI在软件测试领域的前景广阔,但需解决现有挑战。

热门文章

最新文章