数据库压缩备份提升备份效率

背景

    在数据库的备份过程当中有不少参数,前几日发现公司的备份数据库job运行的很慢,就去研究了一下,发如今备份程序中都没有启用压缩,加上压缩之后有发现效率提升了很多,本篇就几个压缩相关的参数来看一下备份数据库的过程当中如何提升备份的效率。数据库

代码实现

    为了更好地了解数据库备份,咱们首先要知道代码以及参数的含义。安全

普通代码:服务器

BACKUP DATABASE ‘备份数据库名称’ 
TO DISK = '地址+bak文件名称' ;


 

加快备份进度的几个关键参数:性能

1.BUFFERCOUNT--指定用于备份操做的 I/O 缓冲区总数。能够指定任何正整数测试

2.MAXTRANSFERSIZE--指定要在 SQL Server 和备份介质之间使用的最大传输单位。可能的值是 64 KB的倍数,最大 4 MB。spa

3.COMPRESSION--压缩备份选项。code

4.CHECKSUM--验证数据选项。blog

5.启用多个备份集。内存

这四个中CHECKSUM是用来保证数据安全的这里咱们不作讨论,因为通常备份也不会用到多个备份集,这里咱们主要讨论前三个带来的影响,固然对于数据量级比较大的能够采用多备份集,尤为不一样磁盘的备份集将会大大提升效率。get

具体对比:

首先是常规没有压缩的状况下的备份如图1:

 

image

图1

数据页数282295,总共花费了32.147秒。接下来咱们看一下当加了压缩等参数后的表现。

增长压缩参数的状况如图2:

image

图2

页数接近,花费的时间是19.524秒,单位备份速度大幅提高到112.957/s。

添加了COMPRESSION、MAXTRANSFERSIZE、BUFFERCOUNT三个参数的:

image

图3

这个就快了很多,花费了17.6秒,写入速度为125.228M/s。

适当缩小MAXTRANSFERSIZE、BUFFERCOUNT,如图4:

image

图4

如图所示,缩小MAXTRANSFERSIZE、BUFFERCOUNT后相应的写入速度略微降低。时间也略微提升。

大幅提高BUFFERCOUNT的数值,可以提高写入速度。

image

图5

缓冲区使用的总计空间由下面公式肯定:buffercount*maxtransfersize,这里须要知道该公式结果不能大于分配内存,因此要注意服务器的最大内存以避免内存溢出。

除了以上几个条件,我也作了几个相关的其余条件的修改来适应不一样的备份数据,例如数据验证CHECKSUM等都会增大备份数据的时间。

注意:

1> 经过压缩先后文件的大小对比可知道到压缩比率。

2> 对已启用压缩的数据库进行压缩备份,CPU消耗会变得更高

压缩主要因素包括:

1.数据类型。字符数据的压缩率要高于其余类型的数据。

2.数据重复的比例越高压缩越好,相似于数据库压缩(页压缩)。

一般,若是某页包含多个行,而其中的某个字段包含相同的值,则该值可得到较大的压缩。相反,对于包含随机数据或者每页只有一个很大的行的数据库,压缩备份的大小几乎与未压缩的备份相同。

 

总结:

    不难发现,以上主要测试三个数据,在合理外围内越大越能提升效率。同时通过研究还发现,备份压缩后,还原的效率也会提升。

COMPRESSION、MAXTRANSFERSIZE、BUFFERCOUNT配合服务器的性能就能大幅提升备份效率。优势是显而易见的对于备份时间,备份文件大小都有提升。

相关文章
相关标签/搜索