热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

(转)解释一下SQLSERVER事务日志记录

本文转载自桦仔的博客http:www.cnblogs.comlyhabcarchive201307163194220.html解释一下SQLSERVER事务日志记录大家知道在完整恢复模
本文转载自桦仔的博客http://www.cnblogs.com/lyhabc/archive/2013/07/16/3194220.html 解释一下SQLSERVER事务日志记录

大家知道在完整恢复模式下,SQLSERVER会记录每个事务所做的操作,这些记录会存储在事务日志里,有些软件会利用事务日志来读取

操作记录恢复数据,例如:log explorer

那么事务日志记录怎麽查看,里面都记录了些什么?

打开可以利用下面SQL语句来查看所在数据库的事务日志记录

1 USE [GPOSDB] --要查看事务日志记录的数据库
2 GO
3 SELECT * FROM [sys].[fn_dblog](NULL,NULL)

 

事务日志记录里很多东西可以看的,里面记录了非常详细的数据库活动信息

我这里只介绍一些重要的需要知道的字段,其他字段由于本人能力有限而且觉得其他字段不是很重要就不介绍了

CurrentLSN:当前LSN号,事务日志中的每个记录都由一个唯一的日志序列号 (LSN) 标识。LSN 是这样排序的:如果 LSN2 大于 LSN1,

则 LSN2 所标识的日志记录描述的更改发生在日志记录 LSN1 描述的更改之后

MSDN解释:http://msdn.microsoft.com/zh-cn/library/ms190411(v=SQL.90).aspx

Operation:当前LSN所做的操作

Context:操作的上下文

TransactoinID:事务ID号

Log Record Fixed Length:LSN记录的所占虚拟日志文件的固定长度

Previous LSN:前一个LSN号

--------------------------------------------------------------------------------------------------------------

AllocUnitID:修改的那条数据所属分配单元ID

AllocUnitName:修改了数据的表名

Page ID:0001:00000121 转换成十进制:289    所以查看pageid为289页  DBCC PAGE([pratice],1,289,3)

Slot ID:数据所在数据页面的第几条记录

PartitionID:数据所在数据页面的所在分区ID

如上图,修改数据的表名是Insert_Test,Page ID是0001:00000121 转换为十进制为289  Slot ID是6(即数据页的第6条记录)

通过下面SQL语句就可以查看页面所在数据

1 USE [pratice]
2 GO
3 DBCC TRACEON(3604,-1)
4 GO
5
6 DBCC PAGE([pratice],1,289,3)
7 GO
 1 Slot 6 Offset 0x552 Length 211
2
3 Record Type = PRIMARY_RECORD Record Attributes = NULL_BITMAP
4 Memory Dump @0x0A2AC552
5
6 00000000: 1000d000 3f080000 61616120 20202020 †....?...aaa
7 00000010: 20202020 20202020 20202020 20202020 †
8 00000020: 20202020 20202020 20202020 20202020 †
9 00000030: 20202020 20202020 20202020 20202020 †
10 00000040: 20202020 20202020 20202020 20202020 †
11 00000050: 20202020 20202020 20202020 20202020 †
12 00000060: 20202020 20202020 20202020 20202020 †
13 00000070: 20202020 20202020 20202020 20202020 †
14 00000080: 20202020 20202020 20202020 20202020 †
15 00000090: 20202020 20202020 20202020 20202020 †
16 000000A0: 20202020 20202020 20202020 20202020 †
17 000000B0: 20202020 20202020 20202020 20202020 †
18 000000C0: 20202020 20202020 20202020 20202020 †
19 000000D0: 0200fc†††††††††††††††††††††††††††††††...
20
21 Slot 6 Column 0 Offset 0x4 Length 4
22
23 id = 2111
24
25 Slot 6 Column 1 Offset 0x8 Length 200
26
27 name = aaa


这个表只有两个字段,我们看一下表数据

--------------------------------------------------------------------------------------------------------

Checkpoint Begin:Checkpoint开始时间

Checkpoint Begin DB Version:当前数据库版本 SQL2005是611  SQL2012是706

Checkpoint End:checkpoint的结束时间,这个时间肯定在Checkpoint Begin的下一条事务日志记录的位置

Minimum LSN: 这个第一个日志记录的日志序列号 (LSN),称为最小恢复 LSN (MinLSN)

Dirty Pages:脏的数据页

Oldest Replicated Begin LSN:如果数据库配置复制的话,那么最老的复制起始LSN

Next Replicated End LSN:下一个复制结尾LSN

Last Distributed End LSN:最新的分发结尾LSN

SPID:执行当前操作的进程ID

Beginlog Status:开始记录事务日志的状态,这个状态表示现时能够正常记录事务日志

Begin Time:事务开始时间

Transaction Name:事务名称

End Time:事务结束时间

Transaction Begin:记录这个事务的begin transaction的时候的cureent LSN

Master DBID:显示当前master数据库的DBID

Preplog Begin LSN:启动数据库前的前一个事务日志LSN

Prepare Time:准备启动数据库的时间

New Split Page:哪个数据页产生了页拆分

Rows Deleted:数据页有多少行被删除了

Description:描述这个事务是干什么的,有时候事务名称不一定就是他所做的操作名称,

比如这里碰巧事务名和描述都是CREATE TABLE 如果你为这个事务命名的话,那么只能看Description列看这个事务是做什么的

-------------------------------------------------华丽的分割线-------------------------------------------------------------------

 现在解释一下 一些常见operation和context,一些不常见的我也不知道 ,呵呵o(∩_∩)o

Operation:当前LSN所做的操作

Context:操作的上下文

DCM页的资料:http://www.cnblogs.com/lyhabc/archive/2013/01/21/2870392.html

Operation

Context

解释

LOP_SET_BITS

LCX_DIFF_MAP

设置位图,资料: 差异(Differential)备份:只备份上次完整备份后,做修改的部分。备份单位是区(Extent)。意味着某个区内即使只有一页做了变动,则在差异备份里会被体现.差异备份依靠一个BitMap进行维护,一个Bit对应一个区,自上次完整备份后,被修改的区会被置为1,而BitMap中被置为1对应的区会被差异备份所备份。而到下一次完整备份后,BitMap中所有的Bit都会被重置为0

而这个BitMap在数据库第7页:

DCM页 差异变更(Differential Changed Map,DCM)页面他跟踪一个文件中的哪一个区在最新一次完整数据库备份之后被修改过。SQLSERVER用在增量备份时只对已发生数据变更的分区进行增量备份即可

LOP_BEGIN_XACT

 

事务开始

LOP_MODIFY_ROW

LCX_HEAP

修改堆表中的某一行记录

LOP_PREP_XACT

 

准备启动数据库

LOP_COMMIT_XACT

 

提交事务

LOP_MODIFY_ROW

LCX_BOOT_PAGE

修改数据库启动页

LOP_MODIFY_HEADER

LCX_PFS

修改PFS页的页头部信息

LOP_INSERT_ROWS

LCX_CLUSTERED

插入数据到聚集索引的索引页

LOP_INSERT_ROWS

LCX_INDEX_LEAF

插入数据到索引的叶子节点即数据页

LOP_FORMAT_PAGE

LCX_CLUSTERED

重新组织聚集索引

LOP_DELETE_SPLIT

LCX_CLUSTERED

删除聚集索引表的一行记录引起页拆分

LOP_MODIFY_HEADER

LCX_HEAP

修改堆表的某页的页头信息

LOP_BEGIN_CKPT

LCX_NULL

检查点开始

LOP_END_CKPT

LCX_NULL

检查点结束

LOP_SET_FREE_SPACE

LCX_PFS

修改PFS页设置那个数据页是空闲的

LOP_ROOT_CHANGE

LCX_CLUSTERED

聚集索引的根节点改变

LOP_INSERT_ROWS

LCX_HEAP

插入数据到堆表

 

 

LOP_FORMAT_PAGE

LCX_HEAP

格式化堆里的数据页

Operation

Lock Information

解释

LOP_LOCK_XACT

HoBt 0:ACQUIRE_LOCK_SCH_M METADATA: database_id = 14   STATS(object_id = 7, stats_id = 11)

在事务里获取锁

                     

-------------------------------------------------------华丽的分割线---------------------------------------------------

在大容量日志恢复模式下,在事务日志记录里你会看不到对数据页的操作,当你使用bcp ,bulk inert, select into大容量操作语句的时候

像下图的那样修改数据和插入数据的记录你在事务日志记录里找不到的

所以大容量日志恢复模式时,ldf文件才这麽小,插入速度才这麽快

下面引用MSDN:

http://msdn.microsoft.com/zh-cn/library/ms190925.aspx
可以尽量减少日志量的操作
“最小日志记录”是指只记录在不支持时间点恢复的情况下恢复事务所需的信息。 本主题介绍在大容量日志恢复模式下(以及简单恢复模式下)按最小方式记录、但在运行备份时例外的操作。
 注意
在完整恢复模式下,所有大容量操作都将被完整地记录下来。 但是,可以通过将数据库暂时切换到用于大容量操作的大容量日志恢复模式,最小化一组大容量操作的日志记录。 最小日志记录比完整日志记录更为有效,并在大容量事务期间,降低了大规模大容量操作填满可用的事务日志空间的可能性。 不过,如果在最小日志记录生效时数据库损坏或丢失,则无法将数据库恢复到故障点。
下列操作在完整恢复模式下执行完整日志记录,而在简单和大容量日志恢复模式下按最小方式记录:
大容量导入操作(bcp、BULK INSERT 和 INSERT...SELECT)。 有关在何时对大容量导入表按最小方式进行记录的详细信息,请参阅在大容量导入中按最小方式记录日志的前提条件。
 注意
启用事务复制时,将完全记录 BULK INSERT 操作,即使处于大容量日志恢复模式下。
SELECT INTO 操作。
 注意
启用事务复制时,将完全记录 SELECT INTO 操作,即使处于大容量日志恢复模式下。
插入或追加新数据时,使用 UPDATE 语句中的 .WRITE 子句部分更新到大型值数据类型。 注意,在更新现有值时没有使用最小日志记录。 有关大型值数据类型的详细信息,请参阅数据类型 (Transact-SQL)。
在 text、ntext 和 image 数据类型列中插入或追加新数据时的 WRITETEXT 和 UPDATETEXT 语句。 注意,在更新现有值时没有使用最小日志记录。
 注意
不推荐使用 WRITETEXT 语句和 UPDATETEXT 语句,因此应该避免在新的应用程序中使用这些语句。
如果数据库设置为简单或大容量日志恢复模式,则无论是脱机还是联机执行操作,都会按最小方式记录一些索引 DDL 操作。 按最小方式记录的索引操作如下:
CREATE INDEX 操作(包括索引视图)。
ALTER INDEX REBUILD 或 DBCC DBREINDEX 操作。
 注意
不推荐使用 DBCC DBREINDEX 语句,因此应该避免在新的应用程序中使用该语句。
DROP INDEX 新堆重新生成(如果适用)。
 注意
DROP INDEX 操作期间将始终完整记录索引页的释放操作。

还可以看一下这篇帖子,关于大容量日志恢复模式

http://social.msdn.microsoft.com/Forums/zh-CN/958febc2-5eaf-46e4-b658-4bea087c0b0f

 

 1 0
2 投票
3 另外,做了下测试。
4
5 在Bulk logged模式下,日志中仅记录对Page(比如IAM,PFS和GAM)的操作,没有记录数据。。
6
7 Operation Context AllocUnitName
8 LOP_MODIFY_ROW LCX_PFS dbo.SomeTable
9 LOP_SET_BITS LCX_IAM dbo.SomeTable
10 LOP_SET_BITS LCX_GAM dbo.SomeTable
11 LOP_MODIFY_ROW LCX_PFS dbo.SomeTable
12 LOP_SET_BITS LCX_IAM dbo.SomeTable
13 LOP_SET_BITS LCX_GAM dbo.SomeTable
14 LOP_MODIFY_ROW LCX_PFS dbo.SomeTable
15 LOP_SET_BITS LCX_IAM dbo.SomeTable
16 但是对于处于Full模式下的DB,除了包含这部分数据,还有记录Data的部分。
17
18 那处于Bulk Logged模式下,所做的事务日志备份,是怎么抓取到数据变化的呢?
19
20 我做了实验,处于Bulk logged模式下,执行了事务备份,之后还是可以通过该备份文件来恢复到select * into 操作之后。
21
22 select * into ../....from ......这个应该是可以最小化日志的操作吧。

帖子里面说到,不记录事务日志,那么怎麽进行数据库还原呢?实际上通过数据库的系统页BCM页来记录数据页的变更的

参考资料:SQL Server 2008 存储结构之DCM、BCM

BCM页面结构

 1 DBCC 执行完毕。如果 DBCC 输出了错误信息,请与系统管理员联系。
2
3 PAGE: (1:7)
4
5
6 BUFFER:
7
8
9 BUF @0x03EDB9F4
10
11 bpage = 0x170E4000 bhash = 0x00000000 bpageno = (1:7)
12 bdbid = 5 breferences = 1 bUse1 = 14098
13 bstat = 0xc00009 blog = 0x32159 bnext = 0x00000000
14
15 PAGE HEADER:
16
17
18 Page @0x170E4000
19
20 m_pageId = (1:7) m_headerVersion = 1 m_type = 17
21 m_typeFlagBits = 0x0 m_level = 0 m_flagBits = 0x0
22 m_objId (AllocUnitId.idObj) = 99 m_indexId (AllocUnitId.idInd) = 0 Metadata: AllocUnitId = 6488064
23 Metadata: PartitiOnId= 0 Metadata: IndexId = 0 Metadata: ObjectId = 99
24 m_prevPage = (0:0) m_nextPage = (0:0) pminlen = 90
25 m_slotCnt = 2 m_freeCnt = 6 m_freeData = 8182
26 m_reservedCnt = 0 m_lsn = (0:0:1) m_xactReserved = 0
27 m_xdesId = (0:0) m_ghostRecCnt = 0 m_tornBits = 0
28
29 Allocation Status
30
31 GAM (1:2) = ALLOCATED SGAM (1:3) = NOT ALLOCATED PFS (1:1) = 0x44 ALLOCATED 100_PCT_FULL
32 DIFF (1:6) = CHANGED ML (1:7) = NOT MIN_LOGGED
33
34 ML_MAP: Header @0x09C2C064 Slot 0, Offset 96
35
36 status = 0x0
37
38 ML_MAP: Extent Alloc Status @0x09C2C0C2
39
40 (1:0) - (1:43256) = NOT MIN_LOGGED
41
42
43 DBCC 执行完毕。如果 DBCC 输出了错误信息,请与系统管理员联系。
View Code

 

 ----------------------------------------------------华丽的分割线-------------------------------------------------

大家有兴趣可以看一下我写的这篇文章,更加了解事务日志

对SQLSERVER数据库事务日志的疑问

 http://www.cnblogs.com/lyhabc/archive/2013/06/10/3130856.html 

根据上面事务日志中的这几个字段,LOG EXPLORER软件为什麽能恢复数据生成insert脚本,估计是读取事务日志中删除了数据的数据页id

然后到数据页里先保存下数据,但是如果使用大容量日志恢复模式或者使用truncate table语句估计LOG EXPLORER软件也救不了你

因为delete语句无论是where 删除某条记录还是全表delete应该都会每条记录生成一个事务日志记录,即生成一个LSN

但是大容量日志恢复模式或者使用truncate table语句是不记录每行数据的LSN的,可能只记录删除动作

AllocUnitID:修改的那条数据所属分配单元ID

AllocUnitName:修改了数据的表名

Page ID:数据页ID

Slot ID:数据所在数据页面的第几条记录

PartitionID:数据所在数据页面的所在分区ID

 --------------------------------------------------华丽的分割线-------------------------------------------------------

 当你备份事务日志并截断日志之后,然后你没有对数据库做任何操作,但是依然会看到有事务日记记录生成

至于原因,由于篇幅关系,大家可以到我的另一篇博文的最下面那个问题,里面有答案

为什麽完整备份之后日志记录会增加,有时候备份完之后会增加,有时候备份完之后会减少???

因为数据库启动的时候一定修改一些系统数据库页所以肯定会有一些事务日志记录生成

文章地址:对SQLSERVER数据库事务日志的疑问


推荐阅读
  • 使用 Docker 部署 MongoDB 并通过 IntelliJ IDEA 远程访问
    本文详细介绍了如何使用 Docker 部署 MongoDB,并通过 IntelliJ IDEA 实现远程连接的方法。包括 MongoDB 的基本配置、用户管理以及如何在 IDE 中配置连接。 ... [详细]
  • 本文探讨了在Qt框架下实现TCP多线程服务器端的方法,解决了一个常见的问题:服务器端仅能与最后一个连接的客户端通信。通过继承QThread类并利用socketDescriptor标识符,实现了多个客户端与服务器端的同时通信。 ... [详细]
  • Activity跳转动画 无缝衔接
    Activity跳转动画 无缝衔接 ... [详细]
  • 本文深入探讨了分布式文件系统的核心概念及其在现代数据存储解决方案中的应用,特别是针对大规模数据处理的需求。文章不仅介绍了多种流行的分布式文件系统和NoSQL数据库,还提供了选择合适系统的指导原则。 ... [详细]
  • 深入解析Android Activity生命周期
    本文详细探讨了Android中Activity的生命周期,通过实例代码和详细的步骤说明,帮助开发者更好地理解和掌握Activity各个阶段的行为。 ... [详细]
  • SQLite是一种轻量级的关系型数据库管理系统,尽管体积小巧,却能支持高达2TB的数据库容量,每个数据库以单个文件形式存储。本文将详细介绍SQLite在Android开发中的应用,包括其数据存储机制、事务处理方式及数据类型的动态特性。 ... [详细]
  • 深入探讨Web服务器与动态语言的交互机制:CGI、FastCGI与PHP-FPM
    本文详细解析了Web服务器(如Apache、Nginx等)与动态语言(如PHP)之间通过CGI、FastCGI及PHP-FPM进行交互的具体过程,旨在帮助开发者更好地理解这些技术背后的原理。 ... [详细]
  • 帝国cms各数据表有什么用
    CMS教程|帝国CMS帝国cmsCMS教程-帝国CMS精易编程助手源码,ubuntu桥接设置,500错误是tomcat吗,爬虫c原理,php会话包括什么,营销seo关键词优化一般多 ... [详细]
  • 设计模式系列-原型模式
    一、上篇回顾上篇创建者模式中,我们主要讲述了创建者的几类实现方案,和创建者模式的应用的场景和特点,创建者模式适合创建复杂的对象,并且这些对象的每个组成部分的详细创建步骤可以是动态的变化的,但 ... [详细]
  • 13、单向链表
    头文件:LinkList.hLinkList.cmain.cVS2 ... [详细]
  • 抽象工厂模式 c++
    抽象工厂模式包含如下角色:AbstractFactory:抽象工厂ConcreteFactory:具体工厂AbstractProduct:抽象产品Product:具体产品https ... [详细]
  • 本文探讨了在Node.js环境中如何有效地捕获标准输出(stdout)的内容,并将其存储到变量中。通过具体的示例和解决方案,帮助开发者解决常见的输出捕获问题。 ... [详细]
  • 本文深入探讨了JLine库中的ConsoleReader.drawBuffer()方法的使用场景和具体实现,通过多个实际代码示例,帮助开发者更好地理解和应用此方法。 ... [详细]
  • 代码生成器实战教程:提升编程效率的利器
    本系列文章旨在通过一系列实践案例,详细介绍如何利用代码生成器提高开发效率。本文将引导您完成从下载安装到实际应用的全过程。 ... [详细]
  • 本文探讨了SQLAlchemy ORM框架中如何利用外键和关系(relationship)来建立表间联系,简化复杂的查询操作。通过示例代码详细解释了relationship的定义、使用方法及其与外键的相互作用。 ... [详细]
author-avatar
peanapple007
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有