为什么事务日志自动增长会降低你的性能

开发 后端 前端
在这篇文章里,我想详细谈下为什么你要避免事务日志(Transaction Log)上的自动增长操作(Auto Growth operations)。很多运行的数据库服务器,对于事务日志,用的都是默认的日志文件大小和自动增长设置。人们有时会很依赖自动增长机制,因为它们刚 好能正常工作。

在这篇文章里,我想详细谈下为什么你要避免事务日志(Transaction Log)上的自动增长操作(Auto Growth operations)。很多运行的数据库服务器,对于事务日志,用的都是默认的日志文件大小和自动增长设置。人们有时会很依赖自动增长机制,因为它们刚 好能正常工作。当然,如果它正常工作的话,你不必太关注它,但很快你会发现会有问题出现。

只依赖于事务日志的自动增长机制总不是个好主意。首先它会导致严重的日志碎片(Log Fragmentation),在SQL Server启动期间,在你数据库上执行崩溃恢复(Crash Recovery)时会有很大的负面影响。另外,在你数据库里写入事务需要等待,只要事务日志触发了自动增长机制。

当事务日志的自动增长机制发生时,SQL Server总要零初始化新块,这个会在文件末尾加上。这和你的SQL Server实例是否用即时文件初始化(Instant File Initialization)特权——事务日志总会零初始化。这上面的原因非常明显:当SQL Server在过去已经完成事务日志的环绕式处理(wrap-around ),崩溃恢复(Crash Recovery)需要知道在哪里停。

零初始化的问题是会占用更多的时间(取决与你的自动增长率,还有你的存储速度)。在此期间没有别的事务可以写事务日志记录到事务日志。在事务日志管 理器上会有闩锁造成的阻塞。因此你的写入事务会进入挂起状态(直到它们获得需要的闩锁),它们就等啊,等啊,等啊,直到你的事务日志自动增长完成。让我们 用一个简单的例子演示下。

首先我为这个演示创建一个新的数据库。对于这个数据库,这里我不用默认的设置,对于事务日志,我指定了10GB的自动增长系数。这个的确是个不好的做法,但我只是用它来展示这个设置的副作用。请不要在你的生产数据库里使用这个错误配置!!!

  1. -- Create a new database with 10 GB Auto Growth for the Transaction Log 
  2. CREATE DATABASE AutoGrowthTransactionLog ON PRIMARY 
  3.     NAME = N'AutoGrowthTransactionLog'
  4.     FILENAME = N'C:\Program Files\Microsoft SQL Server\MSSQL10.MSSQLSERVER\MSSQL\DATA\AutoGrowthTransactionLog.mdf'
  5.     SIZE = 5120KB, 
  6.     FILEGROWTH = 1024KB 
  7. LOG ON 
  8.     NAME = N'AutoGrowthTransactionLog_log'
  9.     FILENAME = N'C:\Program Files\Microsoft SQL Server\MSSQL10.MSSQLSERVER\MSSQL\DATA\AutoGrowthTransactionLog_log.ldf'
  10.     SIZE = 1024KB, 
  11.     FILEGROWTH = 10240000KB -- 10 GB Auto Growth! 
  12. GO 

下一步里我在数据库里创建2个表。第1个表我通过插入一些日志来快速填充我的事务日志。在事务日志自动增长阶段,我们在第2个表里插入新的记录来证明这个事务会被自动增长机制阻塞。

 

  1. -- Create a new table, every records needs a page of 8kb 
  2. CREATE TABLE Chunk 
  3.     Col1 INT IDENTITY PRIMARY KEY, 
  4.     Col2 CHAR(8000
  5. GO 
  6.  
  7. -- Another simple table 
  8. CREATE TABLE Foo 
  9. (    
  10.     Bar INT NOT NULL 
  11. GO 

现在我们已经创建了必须的数据库对象,因次我可以通过新的没有立即提交的事务来填充事务日志:

  1. -- Begin a new transaction, that blocks the 1st VLF in the Transaction Log 
  2. BEGIN TRANSACTION 
  3. INSERT INTO Chunk VALUES (REPLICATE('x'8000)) 
  4. GO 

因为我们现在有了进行中,没提交的事务,SQL Server不能重用那部分事务日志,即这个事务存储的事务日志。它们有需要回滚的可能。因此现在我通过不同的会话插入66条其他记录来填充事务日志:

INSERT INTO AutoGrowthTransactionLog.dbo.Chunk VALUES (REPLICATE('x', 8000))
GO 66

***在***个会话里提交我们的事务:

COMMIT

这意味着在我们面前有一个几乎满的的事务日志,我们可以通过DBCC LOGINFO来验证:

DBCC LOGINFO

现在当我们往表里插入兮的记录时,事务日志已经没有可用空间了,SQL Server进入事务日志的自动增长。

  1. -- This statement will trigger the Auto Growth mechanism! 
  2. INSERT INTO Chunk VALUES (REPLICATE('x'8000)) 
  3. GO 

在自动增长期间的同时,为了监控发生了什么,我们可以在SSMS里打开新的一个会话窗口,尝试在第2个表插入另外的记录——表Foo

-- This statement is now blocked by the Auto Growth mechanism.
INSERT INTO Foo VALUES (1)
GO

这个SQL 语句会阻塞,因为事务要写入事务日志记录的事务日志,当前不可用。为了进一步分析这个阻塞情形,你可以打开第3个会话窗口,执行下列2个SQL语句:

 

  1. -- Analyze the blocking situation 
  2. SELECT wait_type, * FROM sys.dm_exec_requests 
  3. WHERE session_id IN (5455
  4.  
  5. SELECT wait_type, * FROM sys.dm_os_waiting_tasks 
  6. WHERE session_id IN (5455
  7. GO 

(额,俺本机测试失败………………)

从代码里可以看到,我用2个DMV sys.dm_exec_requests 和 sys.dm_os_waiting_tasks对2个会话都进行了跟踪——触发自动增长的会话,和被自动增长机制阻塞的会话。在这里,触发自动增长的会 话里有所谓的抢占等待类型(Preemptive Wait Type)——PREEMPTIVE_OS_WRITEFILEGATHER。抢占等待类型是由SQL Server返回的等待类型,当SQL Server 执行一个WIN32 API函数在调度机制之外时。这里自动增长是通过WriteFileGather的WIN32 API函数完成的。

INSERT语句尝试在Foo表里插入新的记录出现LATCH_EX等待类型。如你从DMV sys.dm_os_waiting_tasks 里的resource_description列所见,在SQL Server的日志管理器上需要获得闩锁。你可以通过查询DMV sys.dm_os_latch_stats 限制lactch class为LOG_MANAGER再次确认。在那个特定闩锁上你会看到一些等待。那个闩锁是事务获取的,由事务日志的自动增长触发,只要这个闩锁要获 得,每个其他写事务都会被阻塞。因此在系统上有大量等待时间时,这暗示这在事务日志里当前有自动增长问题需要处理。

希望我已经用这个日志说服你,依赖于事务日志的自动增长机制并不是***的解决方案。用这个简单的例子可以看到,在你数据库里每个被自动增长操作阻塞的写入事务会发生阻塞,这肯定会伤及你数据库的吞吐量和扩展性。为了保证你有很好的事务日志性能,你可以***想实践下这个文章

责任编辑:王雪燕 来源: Woodytu的博客
相关推荐

2022-09-20 22:27:08

事务失效public 修饰

2022-04-13 20:53:15

Spring事务管理

2016-08-19 01:59:22

APPAPM用户

2021-08-08 08:17:45

事件响应日志网络安全

2020-06-10 14:10:53

服务开发 架构

2014-12-23 09:25:56

程序性能代码

2021-11-17 22:41:41

手机电池低温

2011-05-27 09:19:32

Windows 7崩溃

2021-03-23 10:08:02

编程互联网数据科学

2021-11-05 07:18:15

分布式事务业务

2023-09-20 14:54:17

MySQL

2023-12-08 08:18:41

代号UnicodeUTF-8

2016-05-26 10:57:51

2022-12-26 09:15:13

2023-02-03 17:25:31

自动化代码审查开发

2023-08-17 14:12:17

2017-11-29 18:16:15

高并发ERP态牛

2016-03-25 09:17:14

VR虚拟现实

2015-03-31 10:26:01

数据库数据库事务

2024-08-30 16:14:58

点赞
收藏

51CTO技术栈公众号