热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

SQLServer查询语句性能优化技巧

点击上方SQL数据库开发,关注获取

点击上方SQL数据库开发,关注获取SQL视频教程


SQL专栏

SQL数据库基础知识汇总

SQL数据库高级知识汇总


1.选择最有效率的表名顺序(只在基于规则的优化器中有效)

SQL SERVER的解析器按照从右到左的顺序处理FROM子句中的表名,因此FROM子句中写在最后的表(基础表driving table)将被最先处理,在FROM子句中包含多个表的情况下,必须选择记录条数最少的表作为基础表,当SQLSERVER处理多个表时,会运用排序及合并的方式连接它们,


首先,扫描第一个表(FROM子句中最后的那个表)并对记录进行排序;然后扫描第二个表(FROM子句中最后第二个表);最后将所有从第二个表中检索出的记录与第一个表中合适记录进行合并 


例如: 表 TAB1 16,384 条记录表 TAB2 5 条记录,选择TAB2作为基础表 (最好的方法) select count(*) from tab1,tab2 执行时间0.96秒,选择TAB2作为基础表 (不佳的方法) select count(*) from tab2,tab1 执行时间26.09秒;


如果有3个以上的表连接查询,那就需要选择交叉表(intersection table)作为基础表,交叉表是指那个被其他表所引用的表


例如:

EMP表描述了LOCATION表和CATEGORY表的交集

    SELECT *
    FROM LOCATION L,
    CATEGORY C,
    EMP E
    WHERE E.EMP_NO BETWEEN 1000 AND 2000
    AND E.CAT_NO = C.CAT_NO
    AND E.LOCN = L.LOCN


    将比下列SQL更有效率

      SELECT *
      FROM EMP E ,
      LOCATION L ,
      CATEGORY C
      WHERE E.CAT_NO = C.CAT_NO
      AND E.LOCN = L.LOCN
      AND E.EMP_NO BETWEEN 1000 AND 2000


      2.WHERE子句中的连接顺序

      SQLSERVER采用自下而上的顺序解析WHERE子句,根据这个原理,表之间的连接必须写在其他WHERE条件之前,那些可以过滤掉最大数量记录的条件必须写在WHERE子句的末尾 


      例如: 

        --低效,执行时间156.3秒
        SELECT *
        FROM EMP E
        WHERE SAL > 50000
        AND JOB = 'MANAGER'
        AND 25 <(SELECT COUNT(*) FROM EMP WHERE MGR=E.EMPNO);


          --高效,执行时间10.6秒
          SELECT *
          FROM EMP E
          WHERE 25 <(SELECT COUNT(*) FROM EMP WHERE MGR=E.EMPNO)
          AND SAL > 50000
          AND JOB = 'MANAGER';

          3.SELECT子句中避免使用'*'

          当你想在SELECT子句中列出所有的COLUMN时,使用动态SQL列引用'*'是一个方便的方法,不幸的是,这是一个非常低效的方法。

          实际上,SQLSERVER在解析的过程中,会将'*'依次转换成所有的列名,这个工作是通过查询数据字典完成的,这意味着将耗费更多的时间


          4.减少访问数据库的次数。

          当执行每条SQL语句时,SQLSERVER在内部执行了许多工作:解析SQL语句,估算索引的利用率,绑定变量,读数据块等等 .


          由此可见,减少访问数据库的次数,就能实际上减少SQLSERVER的工作量,例如:
          以下有三种方法可以检索出雇员号等于0342或0291的职员
          方法1 (最低效)

            SELECT EMP_NAME, SALARY, GRADE
            FROM EMP
            WHERE EMP_NO = 342;
            SELECT EMP_NAME, SALARY, GRADE
            FROM EMP
            WHERE EMP_NO = 291;


            方法2 (次低效)

              DECLARE
              CURSOR C1 (E_NO NUMBER) IS
              SELECT EMP_NAME,SALARY,GRADE
              FROM EMP
              WHERE EMP_NO = E_NO;
              BEGIN
              OPEN C1(342);
              FETCH C1 INTO …,…,…;

              OPEN C1(291);
              FETCH C1 INTO …,…,…;

              CLOSE C1;
              END;


              方法3 (高效)

                SELECT A.EMP_NAME, A.SALARY, A.GRADE,
                B.EMP_NAME, B.SALARY, B.GRADE
                FROM EMP A, EMP B
                WHERE A.EMP_NO = 342
                AND B.EMP_NO = 291;


                5.使用DECODE函数来减少处理时间
                使用DECODE函数可以避免重复扫描相同记录或重复连接相同的表
                例如:

                  SELECT COUNT(*), SUM(SAL)
                  FROM EMP
                  WHERE DEPT_NO = '0020'
                  AND ENAME LIKE 'SMITH%';

                  SELECT COUNT(*), SUM(SAL)
                  FROM EMP
                  WHERE DEPT_NO = '0030'
                  AND ENAME LIKE 'SMITH%';


                  你可以用DECODE函数高效地得到相同结果

                    SELECT
                    COUNT(DECODE(DEPT_NO, '0020', 'X', NULL)) D0020_COUNT,
                    COUNT(DECODE(DEPT_NO, '0030', 'X', NULL)) D0030_COUNT,
                    SUM(DECODE(DEPT_NO, '0020', SAL, NULL)) D0020_SAL,
                    SUM(DECODE(DEPT_NO, 0030, SAL, NULL)) D0030_SAL
                    FROM EMP
                    WHERE ENAME LIKE 'SMITH%';


                    'X'表示任何一个字段
                    类似的,DECODE函数也可以运用于GROUP BY和ORDER BY子句中

                    6.用Where子句替换HAVING子句
                    避免使用HAVING子句,HAVING只会在检索出所有记录之后才对结果集进行过滤,这个处理需要排序、统计等操作

                    如果能通过WHERE子句限制记录的数目,那就能减少这方面的开销
                    例如: 

                      --低效
                      SELECT REGION, AVG(LOG_SIZE)
                      FROM LOCATION
                      GROUP BY REGION
                      HAVING REGION REGION != 'SYDNEY'
                      AND REGION != 'PERTH'


                        --高效
                        SELECT REGION, AVG(LOG_SIZE)
                        FROM LOCATION
                        WHERE REGION REGION != 'SYDNEY'
                        AND REGION != 'PERTH'
                        GROUP BY REGION


                        7.减少对表的查询
                        在含有子查询的SQL语句中,要特别注意减少对表的查询
                        例如:

                          --低效
                          SELECT TAB_NAME
                          FROM TABLES
                          WHERE TAB_NAME = (SELECT TAB_NAME
                          FROM TAB_COLUMNS
                          WHERE VERSION = 604)
                          AND DB_VER = (SELECT DB_VER
                          FROM TAB_COLUMNS
                          WHERE VERSION = 604)

                           

                            --高效
                            SELECT TAB_NAME
                            FROM TABLES
                            WHERE (TAB_NAME, DB_VER) = (SELECT TAB_NAME, DB_VER
                            FROM TAB_COLUMNS
                            WHERE VERSION = 604)


                            Update多个Column例子:

                              --低效
                              UPDATE EMP
                              SET EMP_CAT = (SELECT MAX(CATEGORY)
                              FROM EMP_CATEGORIES),
                              SAL_RANGE = (SELECT MAX(SAL_RANGE)
                              FROM EMP_CATEGORIES)
                              WHERE EMP_DEPT = 0020;


                                --高效
                                UPDATE EMP
                                SET (EMP_CAT, SAL_RANGE) = (SELECT MAX(CATEGORY), MAX(SAL_RANGE)
                                FROM EMP_CATEGORIES)
                                WHERE EMP_DEPT = 0020;

                                 

                                8.使用表的别名(Alias)

                                当在SQL语句中连接多个表时,请使用表的别名并把别名前缀于每个Column上,这样可以减少解析的时间并减少那些由Column歧义引起的语法错误

                                9.用EXISTS替代IN
                                在许多基于基础表的查询中,为了满足一个条件,往往需要对另一个表进行联接
                                在这种情况下,使用EXISTS(或NOT EXISTS)通常将提高查询的效率

                                  --低效
                                  SELECT *
                                  FROM EMP (基础表)
                                  WHERE EMPNO > 0
                                  AND DEPTNO IN (SELECT DEPTNO
                                  FROM DEPT
                                  WHERE LOC = 'MELB')

                                   

                                    --高效
                                    SELECT *
                                    FROM EMP (基础表)
                                    WHERE EMPNO > 0
                                    AND EXISTS (SELECT 'X'
                                    FROM DEPT
                                    WHERE DEPT.DEPTNO = EMP.DEPTNO
                                    AND LOC = 'MELB')


                                    10.用NOT EXISTS替代NOT IN
                                    在子查询中,NOT IN子句将执行一个内部的排序和合并
                                    无论在哪种情况下,NOT IN都是最低效的,因为它对子查询中的表执行了一个全表遍历 


                                    为了避免使用NOT IN,我们可以把它改写成外连接(Outer Joins)或NOT EXISTS
                                    例如:

                                      SELECT
                                      FROM EMP
                                      WHERE DEPT_NO NOT IN (SELECT DEPT_NO
                                      FROM DEPT
                                      WHERE DEPT_CAT = 'A');


                                      为了提高效率改写为

                                        --高效
                                        SELECT
                                        FROM EMP A, DEPT B
                                        WHERE A.DEPT_NO = B.DEPT(+)
                                        AND B.DEPT_NO IS NULL
                                        AND B.DEPT_CAT(+) = 'A'

                                          --最高效
                                          SELECT
                                          FROM EMP E
                                          WHERE NOT EXISTS (SELECT 'X'
                                          FROM DEPT D
                                          WHERE D.DEPT_NO = E.DEPT_NO
                                          AND DEPT_CAT = 'A');


                                          11.用表连接替换EXISTS
                                          通常来说,采用表连接的方式比EXISTS更有效率
                                          例如:

                                            SELECT ENAME
                                            FROM EMP E
                                            WHERE EXISTS (SELECT 'X'
                                            FROM DEPT
                                            WHERE DEPT_NO = E.DEPT_NO
                                            AND DEPT_CAT = 'A');  

                                              --更高效
                                              SELECT ENAME
                                              FROM DEPT D, EMP E
                                              WHERE E.DEPT_NO = D.DEPT_NO
                                              AND DEPT_CAT = 'A';


                                              12.用EXISTS替换DISTINCT
                                              当提交一个包含多表信息(比如部门表和雇员表)的查询时,避免在SELECT子句中使用DISTINCT,一般可以考虑用EXIST替换
                                              例如:

                                                --低效
                                                SELECT DISTINCT DEPT_NO, DEPT_NAME
                                                FROM DEPT D, EMP E
                                                WHERE D.DEPT_NO = E.DEPT_NO

                                                 

                                                  --高效
                                                  SELECT DEPT_NO, DEPT_NAME
                                                  FROM DEPT D
                                                  WHERE EXISTS (SELECT 'X'
                                                  FROM EMP E
                                                  WHERE E.DEPT_NO = D.DEPT_NO);

                                                  EXISTS使查询更为迅速,因为RDBMS核心模块将在子查询的条件一旦满足后,

                                                  立刻返回结果


                                                  13.用索引提高效率
                                                  索引是表的一个概念部分,用来提高检索数据的效率。实际上,SQLSERVER使用了一个复杂的自平衡B-tree结构

                                                  通常,通过索引查询数据比全表扫描要快。当SQLSERVER找出执行查询和Update语句的最佳路径时,SQLSERVER优化器将使用索引

                                                  同样,在联结多个表时使用索引也可以提高效率。另一个使用索引的好处是,它提供了主键(primary key)的唯一性验证

                                                  除了那些LONG或LONG RAW数据类型,你可以索引几乎所有的列

                                                  通常在大型表中使用索引特别有效,当然,在扫描小表时,使用索引同样能提高效率

                                                  虽然使用索引能得到查询效率的提高,但是我们也必须注意到它的代价

                                                  索引需要空间来存储,也需要定期维护,每当有记录在表中增减或索引列被修改时,索引本身也会被修改

                                                  这意味着每条记录的INSERT、DELETE、UPDATE将为此多付出4、5次的磁盘I/O

                                                  因为索引需要额外的存储空间和处理,那些不必要的索引反而会使查询反应时间变慢

                                                  SQL SERVER对索引有两种访问模式:

                                                  1).索引唯一扫描(INDEX UNIQUE SCAN)

                                                  大多数情况下, 优化器通过WHERE子句访问INDEX

                                                  例如:
                                                  表LODGING有两个索引:建立在LODGING列上的唯一性索引LODGING_PK和建立在MANAGER列上的非唯一性索引LODGING$MANAGER
                                                  SELECT *
                                                  FROM LODGING
                                                  WHERE LODGING = 'ROSE HILL';

                                                  在内部,上述SQL将被分成两步执行:

                                                  首先,LODGING_PK索引将通过索引唯一扫描的方式被访问,获得相对应的ROWID;然后通过ROWID访问表的方式执行下一步检索

                                                  如果被检索返回的列包括在INDEX列中,SQLSERVER将不执行第二步的处理(通过ROWID访问表)

                                                  因为检索数据保存在索引中,单单访问索引就可以完全满足查询结果

                                                  2).索引范围查询(INDEX RANGE SCAN)

                                                  适用于两种情况:

                                                  1>.基于唯一性索引的一个范围的检索

                                                  2>.基于非唯一性索引的检索

                                                  例1
                                                  SELECT LODGING
                                                  FROM LODGING
                                                  WHERE LODGING LIKE 'M%';

                                                  WHERE子句条件包括一系列值,SQLSERVER将通过索引范围查询的方式查询LODGING_PK

                                                  由于索引范围查询将返回一组值,它的效率就要比索引唯一扫描低一些

                                                  例2
                                                  SELECT LODGING
                                                  FROM LODGING
                                                  WHERE MANAGER = 'BILL GATES';

                                                  这个SQL的执行分两步,LODGING$MANAGER的索引范围查询(得到所有符合条件记录的ROWID),通过ROWID访问表得到LODGING列的值

                                                  由于LODGING$MANAGER是一个非唯一性的索引,数据库不能对它执行索引唯一扫描

                                                  WHERE子句中,如果索引列所对应的值的第一个字符由通配符(WILDCARD)开始,索引将不被采用
                                                  SELECT LODGING
                                                  FROM LODGING
                                                  WHERE MANAGER LIKE '%HANMAN';

                                                  在这种情况下,SQLSERVER将使用全表扫描

                                                  14.避免在索引列上使用计算

                                                  WHERE子句中,如果索引列是函数的一部分,优化器将不使用索引而使用全表扫描

                                                  例如:

                                                    --低效
                                                    SELECT
                                                    FROM DEPT
                                                    WHERE SAL * 12 > 25000;

                                                      --高效
                                                      SELECT
                                                      FROM DEPT
                                                      WHERE SAL > 25000/12


                                                      请务必注意,检索中不要对索引列进行处理,如:TRIM,TO_DATE,类型转换等操作,破坏索引,使用全表扫描,影响SQL执行效率

                                                      15.避免在索引列上使用IS NULL和IS NOT NULL 


                                                      避免在索引中使用任何可以为空的列,SQLSERVER将无法使用该索引

                                                      对于单列索引,如果列包含空值,索引中将不存在此记录;

                                                      对于复合索引,如果每个列都为空,索引中同样不存在此记录。如果至少有一个列不为空,则记录存在于索引中

                                                      如果唯一性索引建立在表的A列和B列上,并且表中存在一条记录的A,B值为(123,null),

                                                      SQLSERVER将不接受下一条具有相同A,B值(123,null)的记录插入

                                                      如果所有的索引列都为空,SQLSERVER将认为整个键值为空,而空不可能等于空,因此你可以插入1000条具有相同键值的记录,当然它们都是空!

                                                      因为空值不存在于索引列中,所以WHERE子句中对索引列进行空值比较将使SQLSERVER停用该索引

                                                        --低效(索引失效)
                                                        SELECT
                                                        FROM DEPARTMENT
                                                        WHERE DEPT_CODE IS NOT NULL


                                                        16.使用UNION-ALL和UNION
                                                        当SQL语句需要UNION两个查询结果集合时,这两个结果集合会以UNION-ALL的方式被合并,然后在输出最终结果前进行排序

                                                        如果用UNION ALL替代UNION,这样排序就不是必要了,效率就会因此得到提高

                                                        需要注意的是,UNION ALL将重复输出两个结果集合中相同记录,因此还是要从业务需求分析使用UNION ALL的可行性

                                                        关于索引下列经验请参考:

                                                        1).如果检索数据量超过30%的表中记录数,使用索引将没有显著的效率提高

                                                        2).在特定情况下,使用索引也许会比全表扫描慢,但这是同一个数量级上的差距;而通常情况下,使用索引比全表扫描要快几倍乃至几千倍!


                                                        ——End——

                                                        关注SQL数据库开发公众号,在后台回复关键字:资料领取,可以获取一份精心整理的技术干货。

                                                        推荐阅读

                                                        • 一次"失败的"SQL开发经历

                                                        • SQL 已死,但 SQL 将永存!

                                                        • 史上最全SQL优化方案


                                                        点击「阅读原文」了解SQL训练营



                                                        推荐阅读
                                                        • 一、Hadoop来历Hadoop的思想来源于Google在做搜索引擎的时候出现一个很大的问题就是这么多网页我如何才能以最快的速度来搜索到,由于这个问题Google发明 ... [详细]
                                                        • 图解redis的持久化存储机制RDB和AOF的原理和优缺点
                                                          本文通过图解的方式介绍了redis的持久化存储机制RDB和AOF的原理和优缺点。RDB是将redis内存中的数据保存为快照文件,恢复速度较快但不支持拉链式快照。AOF是将操作日志保存到磁盘,实时存储数据但恢复速度较慢。文章详细分析了两种机制的优缺点,帮助读者更好地理解redis的持久化存储策略。 ... [详细]
                                                        • 本文介绍了一个在线急等问题解决方法,即如何统计数据库中某个字段下的所有数据,并将结果显示在文本框里。作者提到了自己是一个菜鸟,希望能够得到帮助。作者使用的是ACCESS数据库,并且给出了一个例子,希望得到的结果是560。作者还提到自己已经尝试了使用"select sum(字段2) from 表名"的语句,得到的结果是650,但不知道如何得到560。希望能够得到解决方案。 ... [详细]
                                                        • 本文介绍了如何使用Power Design(PD)和SQL Server进行数据库反向工程的方法。通过创建数据源、选择要反向工程的数据表,PD可以生成物理模型,进而生成所需的概念模型。该方法适用于SQL Server数据库,对于其他数据库是否适用尚不确定。详细步骤和操作说明可参考本文内容。 ... [详细]
                                                        • 本文介绍了如何使用php限制数据库插入的条数并显示每次插入数据库之间的数据数目,以及避免重复提交的方法。同时还介绍了如何限制某一个数据库用户的并发连接数,以及设置数据库的连接数和连接超时时间的方法。最后提供了一些关于浏览器在线用户数和数据库连接数量比例的参考值。 ... [详细]
                                                        • 本文介绍了Hyperledger Fabric外部链码构建与运行的相关知识,包括在Hyperledger Fabric 2.0版本之前链码构建和运行的困难性,外部构建模式的实现原理以及外部构建和运行API的使用方法。通过本文的介绍,读者可以了解到如何利用外部构建和运行的方式来实现链码的构建和运行,并且不再受限于特定的语言和部署环境。 ... [详细]
                                                        • 本文介绍了iOS数据库Sqlite的SQL语句分类和常见约束关键字。SQL语句分为DDL、DML和DQL三种类型,其中DDL语句用于定义、删除和修改数据表,关键字包括create、drop和alter。常见约束关键字包括if not exists、if exists、primary key、autoincrement、not null和default。此外,还介绍了常见的数据库数据类型,包括integer、text和real。 ... [详细]
                                                        • 如何在php中将mysql查询结果赋值给变量
                                                          本文介绍了在php中将mysql查询结果赋值给变量的方法,包括从mysql表中查询count(学号)并赋值给一个变量,以及如何将sql中查询单条结果赋值给php页面的一个变量。同时还讨论了php调用mysql查询结果到变量的方法,并提供了示例代码。 ... [详细]
                                                        • 本文讨论了如何使用IF函数从基于有限输入列表的有限输出列表中获取输出,并提出了是否有更快/更有效的执行代码的方法。作者希望了解是否有办法缩短代码,并从自我开发的角度来看是否有更好的方法。提供的代码可以按原样工作,但作者想知道是否有更好的方法来执行这样的任务。 ... [详细]
                                                        • 本文详细介绍了如何使用MySQL来显示SQL语句的执行时间,并通过MySQL Query Profiler获取CPU和内存使用量以及系统锁和表锁的时间。同时介绍了效能分析的三种方法:瓶颈分析、工作负载分析和基于比率的分析。 ... [详细]
                                                        • Oracle优化新常态的五大禁止及其性能隐患
                                                          本文介绍了Oracle优化新常态中的五大禁止措施,包括禁止外键、禁止视图、禁止触发器、禁止存储过程和禁止JOB,并分析了这些禁止措施可能带来的性能隐患。文章还讨论了这些禁止措施在C/S架构和B/S架构中的不同应用情况,并提出了解决方案。 ... [详细]
                                                        • Python操作MySQL(pymysql模块)详解及示例代码
                                                          本文介绍了使用Python操作MySQL数据库的方法,详细讲解了pymysql模块的安装和连接MySQL数据库的步骤,并提供了示例代码。内容涵盖了创建表、插入数据、查询数据等操作,帮助读者快速掌握Python操作MySQL的技巧。 ... [详细]
                                                        • HashMap的扩容知识详解
                                                          本文详细介绍了HashMap的扩容知识,包括扩容的概述、扩容条件以及1.7版本中的扩容方法。通过学习本文,读者可以全面了解HashMap的扩容机制,提升对HashMap的理解和应用能力。 ... [详细]
                                                        • 一、路由首先需要配置路由,就是点击good组件进入goodDetail组件配置路由如下{path:goodDetail,component:goodDetail}同时在good组件中写入如下点击事件,路由中加入 ... [详细]
                                                        • Iwanttointegratesort,order,maxandoffsetinafindAllquery.Thefollowingworksfine:我想在fin ... [详细]
                                                        author-avatar
                                                        小赖小燕_380
                                                        这个家伙很懒,什么也没留下!
                                                        PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
                                                        Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有