用LGWRWORKER的例子介绍strace分析Oracle数据库行为的方法

作者：因为梦想2013 | 来源：互联网 | 2023-10-17 11:51

可观测性能力是IT运维的强有力的支撑。日志告警、指标是两种在运维中很常用的可观测性指标。

可观测性能力是IT运维的强有力的支撑。日志告警、指标是两种在运维中很常用的可观测性指标。而对于数据库这样复杂的IT组件来说，有时候仅仅依靠日志和指标还是不够的。

跟踪是解决数据库复杂问题的十分常用和有效的方法。今年的openGauss 开发者大会上，华为的黄凯耀分享的案例就是使用了eBPF进行跟踪，最终精准定位了一个比较复杂的性能问题。在跟踪方面，国产数据库与Oracle等传统商用国数据库还有这很大的技术差距。做好跟踪并不容易，让运维人员或者售后服务人员能够很方便的跟踪数据库的某种运行行为可以帮助提升运维，加快BUG定位。只不过加入跟踪后的数据库运行可能会变得不稳定或者触发一些非预期的行为和BUG，因此目前为止，除了Oracle体系化的发布了EVENT接口，让运维人员可以自行通过EVENT设置来改变数据库运行行为，或者监视数据库的内部运行，其他数据库还必须依赖一些外部的跟踪工具，使用起来并不方便。

Oracle提供了十分强大的分析功能，特别是EVENT设置。我刚刚开始学习Oracle不久，就学会了使用event 10046去跟踪SQL语句的执行。这对于我刚刚开始接触Oracle这个黑匣子的说话帮助巨大。在缺乏必要的资料，甚至连一个METALINK账号都没有的时期，学习Oracle数据字典的基本原理，以及数据库启动时的主要动作等，都是通过10046 trace文件完成的。后来也经常使用10046/10053等事件分析，来解决用户的SQL语句性能问题。后来我学习一些Oracle新特性的说话，还是经常会使用event做一些trace。

前两天研究了一下Oracle的LGWR worker新机制，我后来也问了一些客户，在一些系统规模不是很大的场景，好像客户都没有感受到这个新的变化。也有写负载较大的用户遇到了LOG FILE SYNC延时过高的问题，后来通过将LGWR改为原来的写模式解决了问题。于是我昨天写了一篇相关的文章，猜测了一下Oracle实现这个功能的原理。当天下午和一个朋友聊起这个事情，他希望我能够进一步确认一下我的猜测是否靠谱。在网上能够找到的资料极少，于是我只能再次使用起5、6年没用过的跟踪大法来做一个分析。

分析Oracle数据库的后台进程功能有一种十分常用的方法，这个是我从Poder大师那边学来的。结合10046和LINUX的strace，可以比较清晰的分析Oracle后台进程的一些行为。因为10046中会输出某个会话执行过的SQL语句，产生过的各种等待事件，利用这个TRACE上的时间戳，结合strace对于调用堆栈的跟踪，就很容易进行问题定位了。这个方法归纳起来很简单：首先对需要跟踪的后台进程设置8级的10046 TRACE，然后开启压测脚本，同事启用strace对调用堆栈进行跟踪就可以了。我们来看看这个完整的过程。

首先我们找到要跟踪的进程，我们准备跟踪lgwr和lg00。然后分别针对这两个进程设置10046 trace。

在两个窗口中分别通过oradebug设置好之后。我们就可以启用一个压测工具slob去产生一些写负载了。为了减少跟踪的日志量，我们把slob设置为1个进程，并且只启动一个并发。

启动好压测负载后，我们就可以分别在两个窗口中对lgwr/lg00进行strace跟踪了：

对于strace不太熟悉的朋友我可以解释一下，-T -tt是在每个调用前显示时间戳，-s是对于每个调用的数据，最多显示512字节。-p -o我就不解释了，估计地球人都明白。跑上几十秒钟后，我们就可以停止跟踪了，因为大部分的行为都十分类似，没必要跑太久。

我们先来看看lg00的strace跟踪信息，因为我加上了-s参数，因此在trace里可以看到所有写入lg00 trace文件的数据的前面512字节。因此我不需要去查看orcl1_lg00_15626.trc文件了。

上面这段trace的开始是lg00完成了一个日志写入的工作，进入Idle等待状态。随后就收到了写任务，开始写入REDO文件，大家注意看因为使用了异步IO，因此lg00通过io_submit来提交IO。我们往下看，可以发现lg00随后发生了ASM IO for non-blocking poll等待，这是因为向ASM发出了IO。然后lg00产生了我们熟悉的log file parallel write等待。到收到io_getevents为止，异步写完成。于是lg00记录了log file parallel write等待完成。

从日志中我们可以梳理出一个大致的脉络。可以看出在Oracle等待事件的统计时长与实际情况并不完全一致。事实上数据库也没必要十分精确的统计等待时长，只要是一个大致的就足够了。只要误差都是差不多的，对于实际分析来说并没有太大的问题。

我们再来看看lgwr的相关时段的跟踪信息。为了方便查看，我梳理了一个表格，从中可以看出整个过程。

我们先来看lgwr，收到写请求后，找到了一个空闲的worker，然后发出写任务。同时发现所有的worker都处于忙的状态。此时正好没有写任务，于是发出一个本地IPC消息，等待ipc消息回复。

而lg00收到写任务后，首先异步提交了IO，然后产生了一系列预期的写日志的等待。完成后先通知lgwr，然后再给等待着发通知。这个算法是比较合理的，由lg00直接发消息给log file sync等待的会话，而不是通过lgwr，这样会有更高的效率。和我由lgwr发消息，lgwr worker无阻塞写的想法不一致。二者可能在面对不同场景时各有优势，到底哪种更好也不太好判断，也不在我们今天讨论的范围内。今天我们重点要介绍的是跟踪数据库后台进程行为的方法。

推荐阅读

testing
解决ORA-00227错误：控制文件中检测到损坏块

本文详细介绍了如何处理Oracle数据库中的ORA-00227错误，即控制文件中检测到损坏块的问题，并提供了具体的解决方案。 ... [详细]

蜡笔小新 2024-11-25 11:31:38
text
深入解析Android联系人数据库设计：AbstractContactsProvider

本文探讨了Android系统中联系人数据库的设计，特别是AbstractContactsProvider类的作用与实现。文章提供了对源代码的详细分析，并解释了该类如何支持跨数据库操作及事务处理。源代码可从官方Android网站下载。 ... [详细]

蜡笔小新 2024-11-24 18:04:54
function
深入理解PHP中的超全局变量与AJAX技术

本文详细介绍了PHP中的几种超全局变量，包括$GLOBAL、$_SERVER、$_POST、$_GET等，并探讨了AJAX的工作原理及其优缺点。通过具体示例，帮助读者更好地理解和应用这些技术。 ... [详细]

蜡笔小新 2024-11-24 16:35:09
uml
41款高效LISP工具助力数据处理全流程

本文由公众号【数智物语】(ID: decision_engine)发布，关注获取更多干货。文章探讨了从数据收集到清洗、建模及可视化的全过程，介绍了41款实用工具，旨在帮助数据科学家和分析师提升工作效率。 ... [详细]

蜡笔小新 2024-11-24 00:11:50
string
Oracle 11g 创建表空间与基础配置

本文详细介绍了Oracle 11g中的创建表空间的方法，以及如何设置客户端和服务端的基本配置，包括用户管理、环境变量配置等。 ... [详细]

蜡笔小新 2024-11-21 18:54:39
python
如何在Django框架中实现对象关系映射（ORM）

本文介绍了Django框架中对象关系映射（ORM）的实现方式，通过ORM，开发者可以通过定义模型类来间接操作数据库表，从而简化数据库操作流程，提高开发效率。 ... [详细]

蜡笔小新 2024-11-21 17:17:01
email
Oracle 数据库间通过 DBLink 进行交互的方法

本文介绍了如何在两个Oracle数据库（假设为数据库A和数据库B）之间设置DBLink，以便能够从数据库A中直接访问和操作数据库B中的数据。文章详细描述了创建DBLink前的必要准备步骤以及具体的创建方法。 ... [详细]

蜡笔小新 2024-11-20 11:20:35
数组
PHP 基础与数据库操作

本文介绍了 PHP 的基本概念、服务器与客户端的工作原理，以及 PHP 如何与数据库交互。同时，还涵盖了常见的数据库操作和安全性问题。 ... [详细]

蜡笔小新 2024-11-17 15:45:08
php
华为云openEuler环境下的Web应用部署实践

本文详细记录了在华为云openEuler系统上进行Web应用部署的具体步骤，包括配置yum源、安装Apache、MariaDB、PHP及其相关组件，并完成WordPress的安装与配置过程。 ... [详细]

蜡笔小新 2024-11-25 12:39:31
text
Socket 编程基础入门

本文介绍了一个基本的同步Socket程序，演示了如何实现客户端与服务器之间的简单消息传递。此外，文章还概述了Socket的基本工作流程，并计划在未来探讨同步与异步Socket的区别。 ... [详细]

蜡笔小新 2024-11-25 12:35:34
testing
使用Oracle触发器实现特定用户的IP访问控制

本文介绍如何通过创建数据库触发器来限制Oracle数据库中特定用户的登录IP地址，以增强系统的安全性。示例代码展示了如何阻止非授权IP地址的登录尝试。 ... [详细]

蜡笔小新 2024-11-25 09:11:22
go
Java连接MySQL数据库的方法及测试示例

本文详细介绍了如何安装MySQL数据库，并通过Java编程语言实现与MySQL数据库的连接，包括环境搭建、数据库创建以及简单的查询操作。 ... [详细]

蜡笔小新 2024-11-23 18:58:43
string
Redis：缓存与内存数据库详解

本文介绍了数据库的基本分类，重点探讨了关系型与非关系型数据库的区别，并详细解析了Redis作为非关系型数据库的特点、工作模式、优点及持久化机制。 ... [详细]

蜡笔小新 2024-11-18 14:16:11
string
Oracle 10g 和 11g 32位 OCI.DLL 文件下载

32位 PL/SQL Developer 访问 64位 Oracle 11g 数据库时，需要使用 32位的 OCI.DLL 文件以确保正常连接和数据访问。本文将详细介绍如何获取并配置此文件。 ... [详细]

蜡笔小新 2024-11-17 20:10:35
metadata
对象存储与块存储、文件存储等对比

看到一篇文档，讲对象存储，好奇，搜索文章，摘抄,学习记录！背景：传统存储在面对海量非结构化数据时，在存储、分享与容灾上面临很大的挑战，主要表现在以下几个方面：传统存储并非为非结 ... [详细]

蜡笔小新 2024-11-17 18:21:23

因为梦想2013

这个家伙很懒，什么也没留下！

Tags | 热门标签

RankList | 热门文章