热门标签 | HotTags
当前位置:  开发笔记 > 数据库 > 正文

用人工智能主动对SQL语句进行重写

SQL语句的优化是将性能低下的SQL语句转换成目标雷同的性能优良的SQL语句。人工智能主动SQL优化就是应用人工智能技巧,主动对SQL语句进行重写,从而找到性能最好的等效SQL语句数据

SQL语句的优化是将性能低下的SQL语句转换成目标雷同的性能优良的SQL语句。

人工智能主动SQL优化就是应用人工智能技巧,主动对SQL语句进行重写,从而找到性能最好的等效SQL语句

数据库性能的优化

一个数据库系统的生命周期可以分成:设计开发成品三个阶段。在设计阶段进行数据库性能优化的本钱最低,收益最大。在成品阶段进行数据库性能优化的本钱最高,收益最小。

数据库的优化通常可以通过对网络、硬件、把持系统、数据库参数和利用程序的优化来进行。最常见的优化手段就是对硬件的升级。根据统计,对网络、硬件、把持系统、数据库参数进行优化所获得的性能晋升,全部加起来只占数据库系统性能晋升的40%左右,其余的60%系统性能晋升来自对利用程序的优化。很多优化专家认为,对利用程序的优化可以得到80%的系统性能的晋升。

利用程序的优化

利用程序的优化通常可分为两个方面:源代码和SQL语句。由于涉及到对程序逻辑的转变,源代码的优化在时间本钱和风险上代价很高,而对数据库系统性能的晋升收效有限。

为什么要优化SQL语句

. SQL语句是对数据库进行把持的惟一道路,对数据库系统的性能起着决定性的作用。

. SQL语句耗费了70%至90%的数据库资源。

. SQL语句独立于程序设计逻辑,对SQL语句进行优化不会影响程序逻辑。

. SQL语句有不同的写法,在性能上的差别非常大。

. SQL语句易学,但难精通。

优化SQL语句的传统方法是通过手工重写来对SQL语句进行优化。DBA或资深程序员通过对SQL语句履行打算的分析,依附经验,尝试重写SQL语句,然后对成果和性能进行比拟,以试图找到性能较佳的SQL语句。这种传统上的作法无法找出SQL语句的所有可能写法,且依附于人的经验,非常耗费时间。

SQL优化技巧的发展过程

第一代SQL优化工具是履行打算分析工具。这类工具针对输进的SQL语句,从数据库提取履行打算,并说明履行打算中要害字的含义。

第二代SQL优化工具只能供给增加索引的建议,它通过对输进的SQL语句的履行打算的分析,来产生是否要增加索引的建议。

第三代SQL优化工具不仅分析输进SQL语句的履行打算,还对输进的SQL语句本身进行语法分析,经过火析产生写法上的改良建议。

人工智能主动SQL优化

人工智能主动SQL优化呈现在90年代末。目前在商用数据库范畴,LECCO Technology Limited(灵高科研有限公司)拥有该技巧,并供给应用该技巧的主动优化产品LECCO SQL Expert,它支撑Oracle、Sybase、MS SQL Server和IBM DB2数据库平台。该产品针对数据库利用的开发和保护阶段供给的模块有:SQL语法优化器、PL/SQL集成化开发调试环境(IDE)、扫描器、数据库监督器等。其核心模块SQL 语法优化器的工作原理为:①输进一条源SQL语句;②“人工智能反馈式搜索引擎”对输进的SQL语句,联合检测到的数据库结构和索引进行重写,产生N条等效的SQL语句输出;③产生的N条等效SQL语句再送进“人工智能反馈式搜索引擎”进行重写,直至无法产生新的输出或搜索限额满;④对输出的SQL语句进行过滤,选出具有不同履行打算的SQL语句;⑤对得到的SQL语句进行批量测试,找出性能最好的SQL语句。

LECCO SQL Expert主动优化实例

假设我们从源代码中抽取出这条SQL语句(也可以通过内带的扫描器或监督器获得SQL语句):

SELECT COUNT(*)

 

FROM EMPLOYEE

 

swheresEXISTS (SELECT 'X'

 

FROM DEPARTMENT

 

swheresEMP_DEPT=DPT_ID

 

AND DPT_NAME LIKE 'AC%')

 

AND EMP_ID IN (SELECT SAL_EMP_ID

 

FROM EMP_SAL_HIST B

 

swheresSAL_SALARY > 70000)

按下“优化”按钮后,经过10几秒,SQL Expert就完成了优化的过程,并在这10几秒的时间里重写产生了2267 条等价的SQL语句,其中136条SQL语句有不同的履行打算。

接下来,我们可以对主动重写产生的136条SQL语句进行批运行测试,以选出性能最佳的等效SQL语句。按下“批运行” 按钮,在“终止条件” 页选择“最佳运行时间SQL语句”,按“断定”。

经过几分钟的测试运行后,我们可以发明SQL124的运行时间和反应时间最短。运行速度约有22.75倍的晋升(源SQL语句运行时间为2.73秒,SQL124运行时间为0.12秒)。现在我们就可以把SQL124放进源代码中,结束一条SQL语句的优化工作了。

“边做边学式练习”晋升SQL开发程度

LECCO SQL Expert不仅能够找到最佳的SQL语句,它所供给的“边做边学式练习”还能够教开发职员和数据库治理员如何写出性能最好的SQL语句。LECCO SQL Expert的“SQL比拟器”可以标明源SQL和待选SQL间的不同之处。

以上面优化的成果为例,为了查看源SQL语句和SQL124在写法上有什么不同,我们可以按下“比拟器” 按钮,对SQL124和源SQL语句进行比拟。“SQL 比拟器”将SQL124相对于源SQL语句的不同之处以蓝色彩表现了出来。假如选择“双向比拟”复选框,“SQL 比拟器”可以将两条SQL语句的不同之处以蓝色表现。当然,我们也可以从源语句和重写后的SQL 语句中任选两条进行比拟。

从比拟的成果可以看到,重写后的SQL124把第一个Exists改写成了In;在字段DPT_ID上进行了合并空字符串的把持,以引诱数据库先履行子查询中的

(SELECT DPT_ID||''

 

FROM DEPARTMENT

 

WHERE DPT_NAME LIKE 'AC%')

在子查询完成后,再与EMPLOYEE表进行嵌套循环连接(Nested Loop Join)。

假如感到对写法的转变难以懂得,还可以点中“履行打算”复选框,通过比拟两条SQL语句的履行打算的不同,来懂得其中的差别。在查看履行打算过程中,假如有什么不明白的处所,可以点中“SQL信息按钮”,再点击履行打算看不明白的处所,LECCO SQL Expert的高低文敏感帮助系统将供给履行打算该处的说明。

在“SQL比拟器”中,选中“统计信息”复选框后,可得到具体的两条SQL语句运行时的统计信息比拟,这对于学习不同的SQL写法对数据库资源的耗费很有帮助。

推荐阅读
  • docker镜像重启_docker怎么启动镜像dock ... [详细]
  • 本文详细介绍了MySQL中的存储过程,包括其定义、优势与劣势,并提供了创建、调用及删除存储过程的具体示例,旨在帮助开发者更好地利用这一数据库特性。 ... [详细]
  • 前言无论是对于刚入行工作还是已经工作几年的java开发者来说,面试求职始终是你需要直面的一件事情。首先梳理自己的知识体系,针对性准备,会有事半功倍的效果。我们往往会把重点放在技术上 ... [详细]
  • 十大算法书籍助力编程之路
    算法作为编程学习的核心技能,其重要性不容忽视。虽然算法的学习难度较高,但其对提升编程能力、通过技术面试以及应对当前热门的技术领域如人工智能和区块链等都有着不可替代的作用。本文精选十本算法书籍,旨在帮助程序员更好地掌握这一关键技术。 ... [详细]
  • 简化报表生成:EasyReport工具的全面解析
    本文详细介绍了EasyReport,一个易于使用的开源Web报表工具。该工具支持Hadoop、HBase及多种关系型数据库,能够将SQL查询结果转换为HTML表格,并提供Excel导出、图表显示和表头冻结等功能。 ... [详细]
  • 本月初,我们为大家推荐了一系列精选书单,助力大家提升技术水平。月底,我们将介绍几位行业大牛,帮助大家找到人生导师。InfoQ一直致力于为用户提供有价值的资源和支持。 ... [详细]
  • 深入解析SpringMVC核心组件:DispatcherServlet的工作原理
    本文详细探讨了SpringMVC的核心组件——DispatcherServlet的运作机制,旨在帮助有一定Java和Spring基础的开发人员理解HTTP请求是如何被映射到Controller并执行的。文章将解答以下问题:1. HTTP请求如何映射到Controller;2. Controller是如何被执行的。 ... [详细]
  • HTML基础入门指南
    本文将深入浅出地介绍HTML的基础知识,包括其定义、开发工具、制定机构、特性、基本标签及更多实用内容。 ... [详细]
  • Linux环境下进程间通信:深入解析信号机制
    本文详细探讨了Linux系统中信号的生命周期,从信号生成到处理函数执行完毕的全过程,并介绍了信号编程中的注意事项和常见应用实例。通过分析信号在进程中的注册、注销及处理过程,帮助读者理解如何高效利用信号进行进程间通信。 ... [详细]
  • 设计模式在软件开发中被广泛应用,但如果不当使用,可能会导致系统复杂性增加。例如,过度添加类可能导致类图难以理解,代码跟踪变得复杂。本文探讨如何在使用设计模式时保持系统的简洁和高效。 ... [详细]
  • 每年11月,纽约的华人金融界都会聚集在一起,参加全美华人金融协会(TCFA)的年度盛会。今年,TCFA年会迎来了其第23届,主题聚焦于‘中美为核心的多极世界中的金融市场风险与机遇’,特别强调了金融科技领域的发展。 ... [详细]
  • 本文介绍了如何在VB.NET版机房收费系统中实现数据从DataGridView导出至Excel的功能,包括环境配置、代码实现及常见问题解决方法。 ... [详细]
  • a16z 宣布成立全新的加密研究实验室,旨在推动加密技术和 Web3 领域的科学发展。 ... [详细]
  • 腾讯微博即将关闭,十载岁月,你曾参与其中吗?
    9月5日,腾讯微博官方宣布将于9月28日正式停止服务,用户需在此之前完成个人信息的备份工作。 ... [详细]
  • 未来十年,项目管理如何适应零工经济转型?
    随着零工经济的崛起,未来十年项目管理将面临重大变革。本文探讨了项目管理者如何在这一趋势中保持竞争力,以及零工经济对项目管理带来的机遇与挑战。 ... [详细]
author-avatar
Only-安之若素
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有