• 收缩日志文件与数据文件


     

     

    收缩数据文件概述:

      数据库使用数据文件(扩展名是mdf 或 ndf)来存储数据,使用日志文件(扩展名是ldf)来存储事务日志,通常情况下,数据文件会持续增长,不会自动释放空闲空间,这样会导致硬盘空间耗尽。如果一个数据库的文件有很多空闲空间,收缩数据库文件是一种解决硬盘空间紧张的直接方式。在SQL Server中,我们可以使用 DBCC ShrinkFile命令收缩数据文件,该命令首先将文件尾部的区(extent)移动到文件的开头,文件结尾的空闲的硬盘空间被释放给操作系统,这种操作就像截断将文件的尾部一样,这种方式不需要消耗很多IO就能释放空间;但是,如果空闲部分不在文件末尾时,收缩操作必须扫描数据文件,并对正在读取的页面加锁,把文件末尾的区移动到文件开头,这是一个IO密集型的操作,影响数据库的性能,但是,收缩操作不是一个独占行为,在做文件收缩时,其他用户仍然可以对数据库进行读写操作。在任意一个时间点停止dbcc shrinkfile命令,任何已经完成的工作都将保留。

    收缩 数据库 是非常耗费server性能的操作,如果没有必要不要收缩
    go 
      收缩 无非就是把已经分配给数据库文件空间收回来,但是,收缩的时候 要移动数据页,而且可能造成大量的碎片,影响性能。
    go 
      日志收缩和数据文件收缩不一样,日志中的虚拟文件状态 只有 在可复用 时候  才能收缩。
      而且 凡是有活动的日志的日志虚拟文件都是活动的不能收缩。
    go

     

    收缩日志概述:

    日志文件收缩, 回收磁盘空间。
      数据文件 根据设计  设计的大小,一般情况不用收缩,收缩可能带来性能的问题。

    日志
      如果 选择的日志恢复模型是完全,如果没有日志截断,日志增长的很大,
    建议
      备份日志。
        backup log db to disk='备份设备'
      截断日志
        backup log db with no_log
      然后收缩。
        dbcc shrinkfile(2,10)

      原理参考:https://www.cnblogs.com/gallen-n/archive/2017/03/15/6555283.html

     

     

    关于收缩的建议

    不到万不得已,千万不要收缩数据库。收缩数据库影响极大:

    1.收缩数据库对数据库的影响极大,产生大量日志和碎片,而且会锁表。如果你的库当前正在被使用,收缩不下去非常正常。
    2.收缩数据库一定要手工来做的,而且是在维护窗口期做的事。
    3.尽量使用语句来执行,可以提示错误

    下面的文章详细介绍:
    http://www.sqlskills.com/blogs/paul/why-you-should-not-shrink-your-data-files/.

     

    收缩的正确姿势

    在不得不收缩的时候,参考下面的步骤

    1.找到数据库中最大的几个表,重建所有索引。首先尝试指定Truncate Only收缩方式.它只是移除文件尾部的空闲空间,并不重新组织已经使用的数据页。

    DBCC SHRINKDATABASE (AdventureWorks2012, TRUNCATEONLY);  

    2 最后才考虑,不带选项的收缩。收缩不要一次性全部收缩。 可以每次收缩2G左右。不要把空间可用空间全部收缩了,可以剩余一部分比如4G。收缩完后,记得重建索引.

    补充:

    还有一种办法就是新建文件组,使用CREATE INDEX ... WITH(DROP_EXISTING = ON)ON语法将所有相关的的表和索引移动到新文件组。然后收缩旧的文件组。

     

    --收缩数据文件,缩成100M
    USE [Db_Del]
    GO
    DBCC SHRINKFILE (N'Db_Del_Data' , 100)
    GO
    
    --收缩数据库,缩成原有90%,但会造成页迁移与索引碎片
    USE [Db_Del]
    GO
    DBCC SHRINKDATABASE(N'Db_Del', 90 )
    GO
    
    
    --重建表索引
    ALTER INDEX ALL ON Employee
    REBUILD WITH (FILLFACTOR = 60, SORT_IN_TEMPDB = ON,
                  STATISTICS_NORECOMPUTE = ON);

    3.可在进程中的任一点停止 DBCC SHRINKDATABASE 操作,任何已完成的工作都将保留。

    4. 不能在备份数据库时收缩数据库

     

     可能需要收缩的场景

    1.你删除了大量数据,而且数据不太可能增长。

    2.要移除某个文件时,你需要先清空数据文件。

     

    总结

    那我们处理磁盘空间不足的最好的办法是什么呢?最好的办法是在最初规划时,预估好未来一年或者二年的数据增长。给磁盘划分足够的空间。设置好数据库的初始大小,并且将自动增长使用固定量增长。

     

    作者:Owen Zeng
    如果您觉得阅读本文对您有帮助,请点一下“推荐”按钮,您的“推荐”将是我最大的写作动力!欢迎各位转载,转载文章之后必须在文章页面明显位置给出作者和原文连接,否则保留追究法律责任的权利。


    --===================================DB_Tank
    USE [master]
    GO

    ALTER DATABASE [DB_Tank] SET RECOVERY SIMPLE WITH NO_WAIT
    GO

    EXEC('
    USE [Db_Tank]
    DBCC SHRINKFILE (''Db_Tank_Log'' , 2048)  --sql server默认文件单位为M,所以这里是2G
    ')

    print '【'+CONVERT(varchar(20),GETDATE(),120)+'】恢复游戏库模式'
    GO

    USE [master]
    GO

    ALTER DATABASE [Db_Tank] SET RECOVERY BULK_LOGGED WITH NO_WAIT
    GO


    --====================================DB_logs
    USE [master]
    GO

    ALTER DATABASE [DB_logs] SET RECOVERY SIMPLE WITH NO_WAIT
    GO

    EXEC('
    USE [Db_logs]
    DBCC SHRINKFILE (''Db_Logs_Log'' , 2048)
    ')

    print '【'+CONVERT(varchar(20),GETDATE(),120)+'】恢复游戏库模式'
    GO

    USE [master]
    GO

    ALTER DATABASE [Db_Logs] SET RECOVERY BULK_LOGGED WITH NO_WAIT
    GO


    --=======================================系统日志
    /*
    C:Program FilesMicrosoft SQL ServerMSSQL.1MSSQLLOG
    里面的 ERRORLOG.1 错误日志很大,轮转掉它

    sp_cycle_errorlog -手动启动轮转系统日志的sp

    */
    /*
    C:Program FilesMicrosoft SQL ServerMSSQL.1MSSQLData
    tempdb 磁盘收缩

    */

    --======================================tempdb
    USE [tempdb]
    GO
    DBCC SHRINKFILE (N'templog' , 1024)
    GO

    USE [master]
    GO

    print '【'+CONVERT(varchar(20),GETDATE(),120)+'】收缩日志成功'
    GO

    print '【'+CONVERT(varchar(20),GETDATE(),120)+'】正在收缩数据库'
    GO
    DBCC SHRINKDATABASE(tempdb)
    GO
    print '【'+CONVERT(varchar(20),GETDATE(),120)+'】收缩数据库成功'

    收缩数据库文件

     

    数据库使用数据文件(扩展名是mdf 或 ndf)来存储数据,使用日志文件(扩展名是ldf)来存储事务日志,通常情况下,数据文件会持续增长,不会自动释放空闲空间,这样会导致硬盘空间耗尽。如果一个数据库的文件有很多空闲空间,收缩数据库文件是一种解决硬盘空间紧张的直接方式。在SQL Server中,我们可以使用 DBCC ShrinkFile命令收缩数据文件,该命令首先将文件尾部的区(extent)移动到文件的开头,文件结尾的空闲的硬盘空间被释放给操作系统,这种操作就像截断将文件的尾部一样,这种方式不需要消耗很多IO就能释放空间;但是,如果空闲部分不在文件末尾时,收缩操作必须扫描数据文件,并对正在读取的页面加锁,把文件末尾的区移动到文件开头,这是一个IO密集型的操作,影响数据库的性能,但是,收缩操作不是一个独占行为,在做文件收缩时,其他用户仍然可以对数据库进行读写操作。在任意一个时间点停止dbcc shrinkfile命令,任何已经完成的工作都将保留。

    一,收缩文件命令

    收缩文件(DBCC SHRINKFILE)命令做的收缩都是区一级的动作,它会把使用过的区向文件前面移动,把没有使用的区从文件中移除。但是,它不会把一个区里面的空闲页面(Empty Page)移除、也不会把页面中的空闲空间移除。因此,如果一个数据库文件中含有很多只使用了一两个页面的区,收缩操作的效果会不明显。收缩文件不会丢失数据,如果数据最少占用1GB空间,那么收缩操作不会把文件收缩到少于1GB。

    收缩文件命令的语法:

    复制代码
    DBCC SHRINKFILE 
    (
        { file_name | file_id } 
        { [ , EMPTYFILE ] 
        | [ [ , target_size ] [ , { NOTRUNCATE | TRUNCATEONLY } ] ]
        }
    )
    复制代码

    收缩文件是一个函数,其参数的含义是:

    • target_size :单位是MB,收缩操作的目标是把文件收缩到target_size指定的大小。收缩操作是把文件末尾的区向文件开头移动,这意味着,文件末尾的已使用的区会被移动到文件的前面,先重新分配可用的硬盘空间,在移动数据之后,释放数据原来占用的空间。
    • EMPTYFILE  :清空文件,把数据从当前文件迁移到同一个文件组中的他文件上,同时禁止数据存储到空文件中,被清空的文件被移除。
    • NOTRUNCATE :不截断选项,该选项的作用是把已分配(allocated)的区从文件末尾移动到文件前面的未分配的(unallocated )区中,由于文件末尾未的空闲空间并没有释放到操作系统,因此文件的大小不变。
    • TRUNCATEONLY :仅截断选项,该选项的作用是把文件末尾的空闲空间释放给操作系统,由于该选项不会做任何区的移动操作,因此,该选项不会消耗硬盘IO,操作的结果是数据文件的大小减少。在截断日志文件时,该选项不移动任何日志记录,仅仅从日志文件的末尾移除不活动的虚拟日志文件(VLF)。

    二,收缩文件的步骤

    通常情况下,收缩数据库的数据文件和日志文件, 释放文件中的空闲空间,需要两个步骤:先移动,后释放

    Step1,将文件的后部分中正在使用的区向前移动,移动到文件的前部分:

    dbcc shrinkfile('filename',0,notruncate)

    Step2,将文件末尾未被使用的区释放掉,归还给操作系统

    dbcc shrinkfile('filename',target_size_MB,truncateonly)

    清空文件,是为了把空文件从数据库中移除:

    复制代码
    -- Empty the data file.
    DBCC SHRINKFILE (Test1data, EMPTYFILE);
    GO
    -- Remove the data file from the database.
    ALTER DATABASE AdventureWorks2012
    REMOVE FILE Test1data;
    GO
    复制代码

    三,日志文件的收缩

    事务日志文件不停增长的原因有很多,比如

    • 1,Recovery Mode 不是simple,或者说不处于auto-truncate 模式下,
    • 2,有一个很大的事务在运行,
    • 3,有一个运行很长时间的事务没有提交

    都会导致事务日志文件不停增长,此时执行dbcc shrinkflie 命令是不能把日志文件shrink的,必须针对特定的情况,采取对应的对策,一般来说,

    • 对于1,必须安排backup log的计划,使事务日志文件截断和重用 ,
    • 对于2,优化语句的业务逻辑,避免出现大的事务,
    • 对于3,优化application,及时commit 或 rollback 事务。

    有时,会遇到日志文件无法清空的异常:

    dbcc shrinkfile('db_log',emptyfile)

    四,收缩操作的副作用

    收缩数据文件是IO密集型的操作,需要IO,CPU和内存资源,并会产生大量的事务日志,并会导致索引碎片,因此,尽量避免收缩数据文件,只有当迫不得已时,才适当收缩数据文件。由于数据文件的增长也是非常耗时的,所以,不要把数据文件收缩得太小,要预留足够的空间,避免数据文件出现增长的情况。

    1,影响Range操作的查询性能

    Shrink file 有可能产生大量的碎片,这是因为shrink file 存在Extent的移动,逻辑上连续的extent,在移动之后,可能会导致物理上不再连续,影响Range 操作的性能。

    2,消耗IO和CPU资源

    如果SQL Server在shrink data file时不移动数据,那么shrink 就不会产生碎片,对现有数据不会有影响。唯一不影响现有物理数据的情况是在执行DBCC Shrinkfile 命令时指定TruncateOnly选项,DBCC Shrink命令只将文件末尾的剩余空间释放,归还给OS。

    Shrinkfile 是个非常消耗IO资源的操作,Shrinkfile的过程需要移动大量的数据,消耗大量的IO;Shrinkfile的过程会被记录到日志,造成日志暴涨;还会消耗大量的CPU资源。

    3,产生大量的日志,影响依赖日志的Application的性能

    收缩产生的大量日志会被事务日志传送,镜像,复制等操作重复执行。

    4,ShrinkFile 不能将Data File 收缩的太小

    当插入新的数据时,如果Data File空间不够,那么SQL Server需要重新申请 Disk Space,增加 Data file Size,在此过程中,SQL Server需要对新分配的Disk Space填0初始化,除非你开启的是不用填零初始化的选项,不用填零初始化有泄露信息的风险。在全部空间初始化完成之前,新分配的Data File是不能使用的。这个填0初始化,是个非常耗费IO资源的操作,如果一次增长的空间过大,SQL Server需要很长时间对新分配的Disk Space进行初始化,这可能会导致Application timeout,使事务回滚,影响Application的性能。

    参考文档:

    DBCC SHRINKFILE (Transact-SQL)

    Why you want to be restrictive with shrink of database files 

    作者悦光阴
    本文版权归作者和博客园所有,欢迎转载,但未经作者同意,必须保留此段声明,且在文章页面醒目位置显示原文连接,否则保留追究法律责任的权利。
     

    收缩文件命令详细解析:https://www.cnblogs.com/gered/p/9366256.html

  • 相关阅读:
    Linux下Rootkit的另类检测
    用iptables抗御SYN Flood攻击
    用iptables抗御SYN Flood攻击
    突破极限 解决大硬盘上安装Sco Unix新思路
    突破极限 解决大硬盘上安装Sco Unix新思路
    安装、配置Vmware Esx Server 3.5视频全过程
    安装、配置Vmware Esx Server 3.5视频全过程
    应该如何对企业局域网性能传输进行测试分析
    Leetcode-944 Delete Columns to Make Sorted(删除列以使之有序)
    Leetcode-941 Valid Mountain Array(有效的山脉数组)
  • 原文地址:https://www.cnblogs.com/gered/p/8984054.html
Copyright © 2020-2023  润新知