咱们作软件开发的,大部分人都离不开跟数据库打交道,特别是erp开发的,跟数据库打交道更是频繁,存储过程动不动就是上千行,若是数据量大,人员流动大,那么我么还能保证下一段时间系统还能流畅的运行吗?我么还能保证下一我的能看懂我么的存储过程吗?那么我结合公司平时的培训和平时我的工做经验和你们分享一下,但愿对你们有帮助。 html
要知道sql语句,我想咱们有必要知道sqlserver查询分析器怎么执行我么sql语句的,我么不少人会看执行计划,或者用profile来监视和调优查询语句或者存储过程慢的缘由,可是若是咱们知道查询分析器的执行逻辑顺序,下手的时候就成竹在胸,那么下手是否是有把握点呢? 程序员
一:查询的逻辑执行顺序 sql
(1) FROM < left_table> 数据库
(3) < join_type> JOIN < right_table> (2) ON < join_condition> 编程
(4) WHERE < where_condition> 服务器
(5) GROUP BY < group_by_list> 网络
(6) WITH {cube | rollup} 并发
(7) HAVING < having_condition> 函数
(8) SELECT (9) DISTINCT (11) < top_specification> < select_list> 工具
(10) ORDER BY < order_by_list>
标准的SQL 的解析顺序为:
(1).FROM 子句 组装来自不一样数据源的数据
(2).WHERE 子句 基于指定的条件对记录进行筛选
(3).GROUP BY 子句 将数据划分为多个分组
(4).使用聚合函数进行计算
(5).使用HAVING子句筛选分组
(6).计算全部的表达式
(7).使用ORDER BY对结果集进行排序
二 执行顺序:
1.FROM:对FROM子句中前两个表执行笛卡尔积生成虚拟表vt1
2.ON:对vt1表应用ON筛选器只有知足< join_condition> 为真的行才被插入vt2
3.OUTER(join):若是指定了 OUTER JOIN保留表(preserved table)中未找到的行将行做为外部行添加到vt2 生成t3若是from包含两个以上表则对上一个联结生成的结果表和下一个表重复执行步骤和步骤直接结束
4.WHERE:对vt3应用 WHERE 筛选器只有使< where_condition> 为true的行才被插入vt4
5.GROUP BY:按GROUP BY子句中的列列表对vt4中的行分组生成vt5
6.CUBE|ROLLUP:把超组(supergroups)插入vt6 生成vt6
7.HAVING:对vt6应用HAVING筛选器只有使< having_condition> 为true的组才插入vt7
8.SELECT:处理select列表产生vt8
9.DISTINCT:将重复的行从vt8中去除产生vt9
10.ORDER BY:将vt9的行按order by子句中的列列表排序生成一个游标vc10
11.TOP:从vc10的开始处选择指定数量或比例的行生成vt11 并返回调用者
看到这里,那么用过linqtosql的语法有点类似啊?若是咱们咱们了解了sqlserver执行顺序,那么咱们就接下来进一步养成平常sql好习惯,也就是在实现功能同时有考虑性能的思想,数据库是能进行集合运算的工具,咱们应该尽可能的利用这个工具,所谓集合运算实际就是批量运算,就是尽可能减小在客户端进行大数据量的循环操做,而用SQL语句或者存储过程代替。
3、只返回须要的数据
返回数据到客户端至少须要数据库提取数据、网络传输数据、客户端接收数据以及客户端处理数据等环节,若是返回不须要的数据,就会增长服务器、网络和客户端的无效劳动,其害处是显而易见的,避免这类事件须要注意:
A、横向来看,
(1)不要写SELECT *的语句,而是选择你须要的字段。
(2)当在SQL语句中链接多个表时, 请使用表的别名并把别名前缀于每一个Column上.这样一来,就能够减小解析的时间并减小那些由Column歧义引发的语法错误。
1
2
3
4
5
6
7
8
9
10
11
12
13
|
若有表table1(ID,col1)和table2 (ID,col2)
Select A.ID, A.col1, B.col2
-- Select A.ID, col1, col2 –不要这么写,不利于未来程序扩展
from table1 Ainner join table2 Bon A.ID=B.IDWhere …
B、纵向来看,
(1)合理写WHERE子句,不要写没有WHERE的SQL语句。
(2)SELECT TOP N *--没有WHERE条件的用此替代
|
四 :尽可能少作重复的工做
A、控制同一语句的屡次执行,特别是一些基础数据的屡次执行是不少程序员不多注意的。
B、减小屡次的数据转换,也许须要数据转换是设计的问题,可是减小次数是程序员能够作到的。
C、杜毫不必要的子查询和链接表,子查询在执行计划通常解释成外链接,多余的链接表带来额外的开销。
D、合并对同一表同一条件的屡次UPDATE,好比
UPDATE EMPLOYEESET FNAME='HAIWER'
WHERE EMP_ID=' VPA30890F' UPDATE EMPLOYEESET LNAME='YANG'
WHERE EMP_ID=' VPA30890F'
这两个语句应该合并成如下一个语句
UPDATE EMPLOYEESET FNAME='HAIWER',LNAME='YANG' WHERE EMP_ID=' VPA30890F'
|
E、UPDATE操做不要拆成DELETE操做+INSERT操做的形式,虽然功能相同,可是性能差异是很大的。
5、注意临时表和表变量的用法
在复杂系统中,临时表和表变量很难避免,关于临时表和表变量的用法,须要注意:
A、若是语句很复杂,链接太多,能够考虑用临时表和表变量分步完成。
B、若是须要屡次用到一个大表的同一部分数据,考虑用临时表和表变量暂存这部分数据。
C、若是须要综合多个表的数据,造成一个结果,能够考虑用临时表和表变量分步汇总这多个表的数据。
D、其余状况下,应该控制临时表和表变量的使用。
E、关于临时表和表变量的选择,不少说法是表变量在内存,速度快,应该首选表变量,可是在实际使用中发现,
(1)主要考虑须要放在临时表的数据量,在数据量较多的状况下,临时表的速度反而更快。
(2)执行时间段与预计执行时间(多长)
F、关于临时表产生使用SELECT INTO和CREATE TABLE + INSERT INTO的选择,通常状况下,
SELECT INTO会比CREATE TABLE + INSERT INTO的方法快不少,
可是SELECT INTO会锁定TEMPDB的系统表SYSOBJECTS、SYSINDEXES、SYSCOLUMNS,在多用户并发环境下,容易阻塞其余进程,
因此个人建议是,在并发系统中,尽可能使用CREATE TABLE + INSERT INTO,而大数据量的单个语句使用中,使用SELECT INTO。
6、子查询的用法(1)
子查询是一个 SELECT 查询,它嵌套在 SELECT、INSERT、UPDATE、DELETE 语句或其它子查询中。
任何容许使用表达式的地方均可以使用子查询,子查询可使咱们的编程灵活多样,能够用来实现一些特殊的功能。可是在性能上,
每每一个不合适的子查询用法会造成一个性能瓶颈。若是子查询的条件中使用了其外层的表的字段,这种子查询就叫做相关子查询。
相关子查询能够用IN、NOT IN、EXISTS、NOT EXISTS引入。 关于相关子查询,应该注意:
(1)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
|
SELECT TITLEFROM TITLES
WHERE NOT EXISTS
(SELECT TITLE_IDFROM SALES
WHERE TITLE_ID = TITLES.TITLE_ID)
能够改写成:
SELECT TITLE
FROM TITLESLEFT JOIN SALES
ON SALES.TITLE_ID = TITLES.TITLE_ID
WHERE SALES.TITLE_IDIS NULL
B、 若是保证子查询没有重复 ,IN、EXISTS的相关子查询能够用INNER JOIN 代替。好比:
SELECT PUB_NAME
FROM PUBLISHERS
WHERE PUB_IDIN
(SELECT PUB_ID
FROM TITLES
WHERE TYPE ='BUSINESS')
能够改写成:
SELECT A.PUB_NAME--SELECT DISTINCT A.PUB_NAME
FROM PUBLISHERS AINNER JOIN TITLES B
ON B.TYPE ='BUSINESS' AND
A.PUB_ID=B. PUB_ID
|
1
2
3
4
5
6
7
8
9
|
C、IN的相关子查询用EXISTS代替,好比
SELECT PUB_NAMEFROM PUBLISHERS
WHERE PUB_IDIN
(SELECT PUB_IDFROM TITLESWHERE TYPE ='BUSINESS')
能够用下面语句代替:
SELECT PUB_NAMEFROM PUBLISHERSWHERE EXISTS
(SELECT 1FROM TITLESWHERE TYPE ='BUSINESS' AND
PUB_ID= PUBLISHERS.PUB_ID)
D、不要用COUNT(*)的子查询判断是否存在记录,最好用LEFT JOIN或者EXISTS,好比有人写这样的语句:
|
1
2
3
4
5
6
7
8
9
10
11
12
|
SELECT JOB_DESCFROM JOBS
WHERE (SELECT COUNT(*)FROM EMPLOYEEWHERE JOB_ID=JOBS.JOB_ID)=0
应该改为:
SELECT JOBS.JOB_DESCFROM JOBSLEFT JOIN EMPLOYEE
ON EMPLOYEE.JOB_ID=JOBS.JOB_ID
WHERE EMPLOYEE.EMP_IDIS NULL
SELECT JOB_DESCFROM JOBS
WHERE (SELECT COUNT(*)FROM EMPLOYEEWHERE JOB_ID=JOBS.JOB_ID)<>0
应该改为:
SELECT JOB_DESCFROM JOBS
WHERE EXISTS (SELECT 1FROM EMPLOYEEWHERE JOB_ID=JOBS.JOB_ID)
|
创建索引后,并非每一个查询都会使用索引,在使用索引的状况下,索引的使用效率也会有很大的差异。只要咱们在查询语句中没有强制指定索引,
索引的选择和使用方法是SQLSERVER的优化器自动做的选择,而它选择的根据是查询语句的条件以及相关表的统计信息,这就要求咱们在写SQL
语句的时候尽可能使得优化器可使用索引。为了使得优化器能高效使用索引,写语句的时候应该注意:
(1
1
2
3
4
5
6
7
8
9
|
A、不要对索引字段进行运算,而要想办法作变换,好比
SELECT IDFROM TWHERE NUM/2=100
应改成:
SELECT IDFROM TWHERE NUM=100*2
SELECT IDFROM TWHERE NUM/2=NUM1
若是NUM有索引应改成:
SELECT IDFROM TWHERE NUM=NUM1*2
若是NUM1有索引则不该该改。
|
(2)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
|
发现过这样的语句:
SELECT 年,月,金额FROM 结余表 WHERE 100*年+月=2010*100+10
应该改成:
SELECT 年,月,金额FROM 结余表WHERE 年=2010AND月=10
B、 不要对索引字段进行格式转换
日期字段的例子:
WHERE CONVERT(VARCHAR(10), 日期字段,120)='2010-07-15'
应该改成
WHERE日期字段〉='2010-07-15' AND 日期字段<'2010-07-16'
ISNULL转换的例子:
WHERE ISNULL(字段,'')<>''应改成:WHERE字段<>''
WHERE ISNULL(字段,'')=''不该修改
WHERE ISNULL(字段,'F') ='T'应改成:WHERE字段='T'
WHERE ISNULL(字段,'F')<>'T'不该修改
|
(3)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
|
C、 不要对索引字段使用函数
WHERE LEFT(NAME, 3)='ABC' 或者WHERE SUBSTRING(NAME,1, 3)='ABC'
应改成:WHERE NAME LIKE 'ABC%'
日期查询的例子:
WHERE DATEDIFF(DAY, 日期,'2010-06-30')=0
应改成:WHERE 日期>='2010-06-30' AND 日期 <'2010-07-01'
WHERE DATEDIFF(DAY, 日期,'2010-06-30')>0
应改成:WHERE 日期 <'2010-06-30'
WHERE DATEDIFF(DAY, 日期,'2010-06-30')>=0
应改成:WHERE 日期 <'2010-07-01'
WHERE DATEDIFF(DAY, 日期,'2010-06-30')<0
应改成:WHERE 日期>='2010-07-01'
WHERE DATEDIFF(DAY, 日期,'2010-06-30')<=0
应改成:WHERE 日期>='2010-06-30'
|
D、不要对索引字段进行多字段链接
好比:
WHERE FAME+ '. '+LNAME='HAIWEI.YANG'
应改成:
WHERE FNAME='HAIWEI' AND LNAME='YANG'
八:多表链接的链接条件对索引的选择有着重要的意义,因此咱们在写链接条件条件的时候须要特别注意。
A、多表链接的时候,链接条件必须写全,宁肯重复,不要缺漏。
B、链接条件尽可能使用汇集索引
C、注意ON、WHERE和HAVING部分条件的区别
ON是最早执行, WHERE次之,HAVING最后,由于ON是先把不符合条件的记录过滤后才进行统计,它就能够减小中间运算要处理的数据,按理说应该速度是最快的,WHERE也应该比 HAVING快点的,由于它过滤数据后才进行SUM,在两个表联接时才用ON的,因此在一个表的时候,就剩下WHERE跟HAVING比较了
1
2
3
4
|
考虑联接优先顺序:
(1)INNER JOIN
(2)LEFT JOIN (注:RIGHT JOIN 用LEFT JOIN 替代)
(3)CROSS JOIN
|
其它注意和了解的地方有:
A、在IN后面值的列表中,将出现最频繁的值放在最前面,出现得最少的放在最后面,减小判断的次数
B、注意UNION和UNION ALL的区别。--容许重复数据用UNION ALL好
C、注意使用DISTINCT,在没有必要时不要用
D、TRUNCATE TABLE 与 DELETE 区别
E、减小访问数据库的次数
还有就是咱们写存储过程,若是比较长的话,最后用标记符标开,由于这样可读性很好,即便语句写的不怎么样可是语句工整,C# 有region
sql我比较喜欢用的就是
--startof 查询在职人数
sql语句
--end of
|
正式机器上咱们通常不能随便调试程序,可是不少时候程序在咱们本机上没问题,可是进正式系统就有问题,可是咱们又不能随便在正式机器上操做,那么怎么办呢?咱们能够用回滚来调试咱们的存储过程或者是sql语句,从而排错。
BEGIN TRAN
UPDATE aSET 字段=''
ROLLBACK
|
做业存储过程我通常会加上下面这段,这样检查错误能够放在存储过程,若是执行错误回滚操做,可是若是程序里面已经有了事务回滚,那么存储过程就不要写事务了,这样会致使事务回滚嵌套下降执行效率,可是咱们不少时候能够把检查放在存储过程里,这样有利于咱们解读这个存储过程,和排错。