一、加快sql的执行速度
1.select 语句中使用sort,或join
如果你有排序和连接操作,你可以先select数据到一个临时表中,然后再对临时表进行处理。因为临时表是建立在内存中,所以比建立在磁盘上表操作要快的多。
如:
select time_records.*, case_name
FROM time_records, OUTER cases
where time_records.client = “AA1000”
AND time_records.case_no = cases.case_no
ORDER BY time_records.case_no
这个语句返回34个经过排序的记录,花费了5分钟42秒。而:
select time_records.*, case_name
FROM time_records, OUTER cases
where time_records.client = “AA1000”
AND time_records.case_no = cases.case_no
INTO temp foo;
select * from foo ORDER BY case_no
返回34条记录,只花费了59秒。
2.使用not in 或者not exists 语句
下面的语句看上去没有任何问题,但是可能执行的非常慢:
select code FROM table1
where code NOT IN ( select code FROM table2
如果使用下面的方法:
select code, 0 flag
FROM table1
INTO TEMP tflag;
然后:
update tflag SET flag = 1
where code IN ( select code FROM table2
where tflag.code = table2.code ;
然后:
select * FROM
tflag
where flag = 0;
看上去也许要花费更长的时间,但是你会发现不是这样。
事实上这种方式效率更快。有可能第一种方法也会很快,那是在对相关的每个字段都建立了索引的情况下,但是那显然不是一个好的注意。
3.避免使用过多的“or”
如果有可能的话,尽量避免过多地使用or: where a = “B” OR a = “C”
要比 where a IN (“B”,”C”) 慢。 有时甚至union会比OR要快。
4.使用索引
在所有的join和order by 的字段上建立索引。 在where中的大多数字段建立索引。
where datecol >= “this/date” AND datecol
<= “that/date” 要比 where datecol BETWEEN
”this/date” AND “that/date” 慢。
二、在shell脚本中使用一个sql查询的结果
以下的是一个运行在sh/ksh下面的脚本。在online中,如果你想要更新一个有许多表的数据库的统计信息。这个脚本不太好。因为这个脚本只能单个处理数据库中的表,而不能同时处理大量的表。
例子:
# update_em
# Run update STATISTICS on a table by table basis
# DATABASE=$1
if [ -z “$DATABASE” ]
then
echo “usage: update_em dbname” >&2
exit 1
fi
isql $DATABASE – < dev/null | isql $DATABASE –
output to pipe “cat” without headings
select “update statistics for table “, tabname, “;”
from systables where tabid >= 100 order by tabname;
EOF
exit 0
也许你已经注意到exit的返回值对不同的isql不是都相同,因此这样作不是很可靠,代替通过$?来检查返回值的更好的主意是将标准错误重定向到一个文件中,然后在这个文件中grep “error”。例如:
# Generate the data
isql -qr <<!>stage.rep 2>$stage.err
database $database;
select …
!
# Check for errors
if grep -i “error” $stage.err >/dev/null
then
…error_handler…
fi
三、对一个计算产生的字段创建视图
应该这样写:
create VIEW tst (cout) AS
select ship_charge – totval
FROM orders where ship_charge > 0;
四、只select 出数据库中的部分数据(例如10%)
问题:如果你想要得到一个select 语句正常返回的数据的一部分,例如:
select firstname, lastname, city, state
FROM bigdatabase
where state = “TX”
回答: 有一个方法可以返回一个近似值,只需要在where后加上:AND rowid=(trunc(rowid/x)*x)
其中的x代表你想要返回的总的记录的1/x。需要说明的是,这种方法只能返回一个近似的值,并且表中的数据在物理上分布的连续性。
五、创建一个表结构和永久表完全一致的临时表。
例如:create TEMP TABLE mytemp (prodno like
product.prodno desc like product.desc)
你可以使用如下的语句:
select prodno, desc FROM product
where ROWID = -1
insert INTO TEMP mytemp
六、更改serial类型下一次插入操作产生的值
我们知道serial类型的字段是系统自动增加的整数字段,那么怎样能控制下一个serial类型字段的值。想要下一个插入的serial类型的值比默认值大,可以用:
alter TABLE tabname MODIFY
( ser_col_name SERIAL([new_start_number])
想要下一个插入的serial类型的值比默认的值要小,首先需要将serial类型重新置为1:
insert INTO table (serial_column) VALUES (2147483647);
insert INTO table (serial_column) VALUES (0); — 重新从1开始!
….然后执行alter TABLE(就像上面的做法一样)。
七、在发生错误的时候终止sql脚本的执行
如果你创建了一个sql脚本,并且在UNIX命令行中使用以下的方式来执行这个脚本:
$ dbaccess <脚本文件名>
这时,脚本中的所有的sql语句都会被执行,即使其中的一个sql语句发生了错误。例如,如果你脚本中为如下的语句:
BEGIN WORK;
insert INTO history
select *
FROM current
where month = 11;
delete FROM current
where month = 11;
COMMIT WORK;
如果insert语句失败了,delete语句仍旧会继续执行。直到commit work。这样的后果可能会很严重。你可以通过设置一个环境变量来防止这种情况的发生。 DBACCNOIGN=1
八、设置decimal字段运算结果的精度
假定你使用dbaccess或者isql,设置环境变量DBFLTMASK=6 就可以设置为小数点后面6位,比如:
create TEMP TABLE t
( col_a DECIMAL(8,4) NOT NULL,
col_b DECIMAL(8,4) NOT NULL,
col_c DECIMAL(8,4) NOT NULL
);
insert INTO t VALUES(1.2345, 3.4567, 5.6789);
select (col_a + col_b) / col_c AS value FROM t;
value 0.826075
如果DBFLTMASK=7
value 0.8260755
九、遇到sysprocplan表被锁的提示
sysprocplan表是sysmaster库中的一个表,其中记录存储过程经过优化的查询计划。每当查询树中的数据库对象有任何结构上的变化,这个查询计划就会自动更新。如果对查询树中存在的任何表有update statistics操作,也会自动更新查询计划。在查询计划更新的时候,会对sysporcplan表中的相关记录加锁。
注意:每次你对一个表更新统计的时候,也同时会更新于这个表相关的存储过程,即update STATISTICS FOR PROCEDURE 。
你可以作的另外一件事情就是:在存储过程中使用SET OPTIMIZATION LOW,这会让优化器在存储过程运行的时候不会试图去重新优化它。否则存储过程通常都会被重新优化一次。
十、删除掉表中重复的记录
假设“keycol”字段的值唯一,而且没有对表进行分片,并且没有其它的人正在删除”sometable”中的记录,你可以执行如下的SQL:
delete from sometable as a where rowid <>
(select min(rowid) from sometable where keycol = a.keycol)
如果这个表使用表分片,rowid不存在,你还可以用如下的方法:
BEGIN WORK;
select DISTINCT * FROM Table INTO TEMP Temp1;
delete FROM Table where 1 = 1;
insert INTO Table select * FROM Temp1;
COMMIT WORK;
对于规模较小或中等的表,并且你有足够的存储空间来存储整个的临时表的时候,这种方法通常十分有效。
十一、加快select count(DISTINCT)的速度
通常“select count(DISTINCT)”这样的操作要花费比较长的时间,如果按照下面的示例去作:
select UNIQUE xxx INTO TEMP XXX ” 然后再”select count(*) FROM TEMP XXX”
此例一般可以提高几倍的效率。
我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。
我原创,你原创,我们的内容世界才会更加精彩!
【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】
微信公众号
TechTarget
官方微博
TechTarget中国
相关推荐
-
Azure数据湖分析从U-SQL中获得提升
大数据的发展已经让许多精通SQL的数据专业人员不知所措。微软的U-SQL编程语言试图让这些人回归数据查询游戏。
-
TT百科:SQL(结构化查询语言)
一般来说,SQL-on-Hadoop仍是一项新兴技术,但随着各个公司寻求获得拥有大数据应用程序编程SQL技能的开发和分析人员,它们正逐渐成为Hadoop部署的固定组件。
-
SQL和NoSQL数据库设计之争
企业收集了很多大规模增长的松散结构化数据,Hadoop,Spark以及其他新技术处理这些数据非常有助于改善商业智能分析效率。
-
如何通过格式良好的SQL提高效率和准确性
格式良好的SQL并不会比乱七八糟的SQL运行效果更好。数据库其实不怎么关心SQL语句中你把逗号放到了字段名的前面还是后面。