热门标签 | HotTags
当前位置:  开发笔记 > 数据库 > 正文

SPA最佳实践

SPA最佳实践SPA官方描绘的蛮完美的,但在实践中,还是有很多的坑。下面会一一展示本人在SPA实践项目中遇到的各种坑,以及解决方案。OPTIMIZER_MODE问题SQL在目标库实际运行时需要跟源库保持一致,以SIEBEL库为例,它都会在SESSION级别设置以下影响CBO的

SPA 最佳实践 SPA官方描绘的蛮完美的,但在实践中,还是有很多的坑。下面会一一展示本人在SPA实践项目中遇到的各种坑,以及解决方案。 OPTIMIZER_MODE问题 SQL在目标库实际运行时需要跟源库保持一致,以SIEBEL库为例,它都会在SESSION级别设置以下影响CBO的

SPA 最佳实践

SPA官方描绘的蛮完美的,但在实践中,还是有很多的坑。下面会一一展示本人在SPA实践项目中遇到的各种坑,以及解决方案。

OPTIMIZER_MODE问题

SQL在目标库实际运行时需要跟源库保持一致,以SIEBEL库为例,它都会在SESSION级别设置以下影响CBO的参数。
alter session set optimizer_mode=FIRST_ROWS_10;
alter session set "_hash_join_enabled"=FALSE;
alter session set "_optimizer_sortmerge_join_enabled"=FALSE;
alter session set "_optimizer_join_sel_sanity_check"=TRUE;
官方提供的方法如下:
exec dbms_sqlpa.set_analysis_task_parameter('SPA_TASK_NAME','APPLY_CAPTURED_COMPILENV', 1);
实际测试中,发现这种方法对于用DBLINK连过去执行的方式无效果呀(源库目标库版本均为 10.2.0.5 SPA测试库版本 11.2.0.3 )。所以只能在取STS时把在SESSION级别改了OPTIMER的用户的SQL单独取一个STS,然后在测试库系统级别改参数后运行。对于要用DBLINK的方案目前没太好的解决办法。

SQL实际运行时间长,不可控

SPA 实际执行SQL时是串行执行,要做并行参考这位哥哥的博客(http://hongyedba.cn/2014/05/20/thought_about_parallel_spa/),贴几张自己画的流程图。
设置参数限定每个SQL执行的时间如设定每个SQL最长执行1分钟dbms_advisor.arglist('LOCAL_TIME_LIMIT','60') \
\
\

SPA PLAN_CHANGE项不准

SPA分析报告中会列出执行计划改变的SQL以供后继调优使用,但SPA判断PLAN 是否是同一个时,标准就是PLAN_HASH_VALUE。然而PHV是会受大小端影响的,也就是同样的一个PLAN在大端算出来的PHV跟小端算出来的是不一样。(文章可参考:http://carlos-sierra.net/tag/plan-hash-value/)更坑的是,这个标准是不能改的。但我们就是想知道在实际执行中计划发生改变的那些SQL,怎么办呢。SPA 中ORACLE是没有提供好的办法,只能自己动手通过dba_advisor_sqlplans与dba_sqlset_plans 这两张表对比来实现了。

解决方案:

create or replace function plan_change(p_sql_id IN VARCHAR2,
p_task_name  IN VARCHAR2,
p_execution_name IN VARCHAR2,
p_sqlset_nameIN VARCHAR2)
  return VARCHAR2 is
  l_plan_changed number := 0;
begin

  select count(1)
into l_plan_changed
from (select id, operation, options, object_owner, object_name
from dba_advisor_sqlplans
   where sql_id = p_sql_id
 and task_name = p_task_name
 and execution_name = p_execution_name
  minus
  select id, operation, options, object_owner, object_name
from dba_sqlset_plans
   where sql_id = p_sql_id
 and sqlset_name = p_sqlset_name) diff;

  if l_plan_changed <> 0 then
return &#39;Y&#39;;
  end if;

  select count(1)
into l_plan_changed
from (select id, operation, options, object_owner, object_name
from dba_sqlset_plans
   where sql_id = p_sql_id
 and sqlset_name = p_sqlset_name
  minus
  select id, operation, options, object_owner, object_name
from dba_advisor_sqlplans
   where sql_id = p_sql_id
 and task_name = p_task_name
 and execution_name = p_execution_name) diff;

  if l_plan_changed <> 0 then
return &#39;Y&#39;;
  else
return &#39;N&#39;;
  end if;

end plan_change;

在不考虑业务的情况下,上面的函数已经比较准确了,对于业务中有星形查询,主表走得是对的,然后其他的表的连接顺序交换了或是有个别表的索引换了,上面的函数会认为计划是不一样的。不过这种SQL其实也不用太关心,只要下边的谓词没变。BUFFER GETS没太多增长。

找出并分析问题SQL思路

分析出哪些SQL在目标库执行时有问题,并不像官方报告里展示的那样简单,下面我们就来看看难点在哪儿。

执行计划改变的SQL(报告中的不准)
性能下降的SQL(对比的维度选择)
ELASPED TIME因为SPA执行时是没有CACHE的,这个不准
CPU TIME 源库是并发环境,SPA默认是串行执行。这个也不太准
BUFFER GETS 这个相对比较准,但源库SQL的统计信息是平均值,目标库是单次的实际值。其实差别还是蛮大的。所以最通过BUFFER GETS看出来性能下降的SQL,还要带入绑定变量值到源库,目标库实际运行一下,对比真实的BUFFER GETS
TIME OUT的SQL
这种SQL是重点,其实还要结合PLAN CHANGE来看,也就是超时且执行计划改变的。
SPA中对于SQL 执行时间的限定这块儿只能是一个固定的时间,不能按每个SQL历史的执行时间动态的给每个SQL设定执行时间,所以有的SQL本来执行时间就很长,而且垫计划也没变的,其实也没问题
TIME OUT的SQL找绑定变量值比较麻烦一点,报告里不会有绑定变量值,源库也可能没这个SQL信息。在测试库抓取时也会发现SPA运行SQL时会在SQL文本前加上一些注释使得SQL_ID发生变化,直接按文本找会发现可能是换行,空格等原因也找不出来。解决方案在测试库中把TIME OUT的SQL重新跑一遍,然后在V$SQL中按SQL_FULLTEXT like &#39;%条件1%&#39;的结果集 intersect SQL_FULLTEXT like &#39;%条件2%&#39;的结果集,或更多条件。
推荐阅读
  • 本文详细探讨了不同SQL数据库管理系统(DBMS)在限制输出结果、拼接字段和日期时间处理方面的函数差异。通过具体示例,帮助读者理解并掌握如何在不同DBMS中实现相同功能。 ... [详细]
  • 本文详细介绍了IBM DB2数据库在大型应用系统中的应用,强调其卓越的可扩展性和多环境支持能力。文章深入分析了DB2在数据利用性、完整性、安全性和恢复性方面的优势,并提供了优化建议以提升其在不同规模应用程序中的表现。 ... [详细]
  • PHP 5.2.5 安装与配置指南
    本文详细介绍了 PHP 5.2.5 的安装和配置步骤,帮助开发者解决常见的环境配置问题,特别是上传图片时遇到的错误。通过本教程,您可以顺利搭建并优化 PHP 运行环境。 ... [详细]
  • 深入理解 SQL 视图、存储过程与事务
    本文详细介绍了SQL中的视图、存储过程和事务的概念及应用。视图为用户提供了一种灵活的数据查询方式,存储过程则封装了复杂的SQL逻辑,而事务确保了数据库操作的完整性和一致性。 ... [详细]
  • 构建基于BERT的中文NL2SQL模型:一个简明的基准
    本文探讨了将自然语言转换为SQL语句(NL2SQL)的任务,这是人工智能领域中一项非常实用的研究方向。文章介绍了笔者在公司举办的首届中文NL2SQL挑战赛中的实践,该比赛提供了金融和通用领域的表格数据,并标注了对应的自然语言与SQL语句对,旨在训练准确的NL2SQL模型。 ... [详细]
  • 本文详细介绍了HTML中标签的使用方法和作用。通过具体示例,解释了如何利用标签为网页中的缩写和简称提供完整解释,并探讨了其在提高可读性和搜索引擎优化方面的优势。 ... [详细]
  • 数据库内核开发入门 | 搭建研发环境的初步指南
    本课程将带你从零开始,逐步掌握数据库内核开发的基础知识和实践技能,重点介绍如何搭建OceanBase的开发环境。 ... [详细]
  • 本文深入探讨 MyBatis 中动态 SQL 的使用方法,包括 if/where、trim 自定义字符串截取规则、choose 分支选择、封装查询和修改条件的 where/set 标签、批量处理的 foreach 标签以及内置参数和 bind 的用法。 ... [详细]
  • 使用C#开发SQL Server存储过程的指南
    本文介绍如何利用C#在SQL Server中创建存储过程,涵盖背景、步骤和应用场景,旨在帮助开发者更好地理解和应用这一技术。 ... [详细]
  • 本文探讨了适用于Spring Boot应用程序的Web版SQL管理工具,这些工具不仅支持H2数据库,还能够处理MySQL和Oracle等主流数据库的表结构修改。 ... [详细]
  • 本文详细介绍了如何通过多种编程语言(如PHP、JSP)实现网站与MySQL数据库的连接,包括创建数据库、表的基本操作,以及数据的读取和写入方法。 ... [详细]
  • 在当前众多持久层框架中,MyBatis(前身为iBatis)凭借其轻量级、易用性和对SQL的直接支持,成为许多开发者的首选。本文将详细探讨MyBatis的核心概念、设计理念及其优势。 ... [详细]
  • 在使用 DataGridView 时,如果在当前单元格中输入内容但光标未移开,点击保存按钮后,输入的内容可能无法保存。只有当光标离开单元格后,才能成功保存数据。本文将探讨如何通过调用 DataGridView 的内置方法解决此问题。 ... [详细]
  • 本文详细介绍了如何在 Linux 平台上安装和配置 PostgreSQL 数据库。通过访问官方资源并遵循特定的操作步骤,用户可以在不同发行版(如 Ubuntu 和 Red Hat)上顺利完成 PostgreSQL 的安装。 ... [详细]
  • 如何在PostgreSQL中查看数据表
    本文将指导您使用pgAdmin工具连接到PostgreSQL数据库,并展示如何浏览和查找其中的数据表。通过简单的步骤,您可以轻松访问所需的表结构和数据。 ... [详细]
author-avatar
小猪猫猫晓
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有