dd 是 Linux/UNIX 下的一个很是有用的命令,做用是用指定大小的块拷贝一个文件,并在拷贝的同时进行指定的转换。html
dd 命令通用语法格式以下:ios
dd if=path/to/input_file of=/path/to/output_file bs=block_size count=number_of_blocks
if=file 输入文件名,缺省为标准输入。 of=file 输出文件名,缺省为标准输出。 ibs=bytes 一次读入 bytes 个字节(即一个块大小为 bytes 个字节)。 obs=bytes 一次写 bytes 个字节(即一个块大小为 bytes 个字节)。 bs=bytes 同时设置读写块的大小为 bytes ,可代替 ibs 和 obs 。 cbs=bytes 一次转换 bytes 个字节,即转换缓冲区大小。 skip=blocks 从输入文件开头跳过 blocks 个块后再开始复制。 seek=blocks 从输出文件开头跳过 blocks 个块后再开始复制。(一般只有当输出文件是磁盘或磁带时才有效)。 count=blocks 仅拷贝 blocks 个块,块大小等于 ibs 指定的字节数。 conv=conversion[,conversion...] 用指定的参数转换文件。 iflag=FLAGS 指定读的方式FLAGS,参见“FLAGS参数说明” oflag=FLAGS 指定写的方式FLAGS,参见“FLAGS参数说明”
conv 转换参数:缓存
ascii 转换 EBCDIC 为 ASCII。 ebcdic 转换 ASCII 为 EBCDIC。 ibm 转换 ASCII 为 alternate EBCDIC. block 把每一行转换为长度为 cbs 的记录,不足部分用空格填充。 unblock 使每一行的长度都为 cbs ,不足部分用空格填充。 lcase 把大写字符转换为小写字符。 ucase 把小写字符转换为大写字符。 swab 交换输入的每对字节。 noerror 出错时不中止。 notrunc 不截短输出文件。 sync 把每一个输入块填充到ibs个字节,不足部分用空(NUL)字符补齐。
FLAGS 参数说明:app
append -append mode (makes sense only for output; conv=notrunc sug-gested) direct 读写数据采用直接IO方式; directory 读写失败除非是directory; dsync 读写数据采用同步IO; sync 同上,可是针对是元数据 fullblock 堆积满block(accumulate full blocks of input )(iflag only); nonblock 读写数据采用非阻塞IO方式 noatime 读写数据不更新访问时间
time+dd 测磁盘读写速度性能
一、先熟悉两个特殊的设备及一些相关参数:测试
1) time有计时做用,dd用于复制,从if读出,写到of;spa
2) if=/dev/zero(产生字符)不产生IO,所以能够用来测试纯写速度;操作系统
3) 同理of=/dev/null(回收站、无底洞)不产生IO,能够用来测试纯读速度;code
4) 将/tmp/test拷贝到/var则同时测试了读写速度;htm
5) bs是每次读或写的大小,即一个块的大小,count是读写块的数量。
当写入到驱动盘的时候,咱们简单的从无穷无用字节的源 /dev/zero 读取,当从驱动盘读取的时候,咱们读取的是刚才的文件,并把输出结果发送到无用的 /dev/null。在整个操做过程当中, DD 命令会跟踪数据传输的速度而且报告出结果。
2.测试磁盘写能力(写速度)
time dd if=/dev/zero of=test.dbf bs=8k count=300000
其中/dev/zero是一个伪设备,它只产生空字符流,对它不会产生IO,因此,IO都会集中在of文件中,of文件只用于写,因此这个命令至关于测试磁盘的写能力,上面为每一块大小是8k,共有300000块。
输出的结果相似(由于通常更长测试时间更准确,因此能够设置count大一些):
300000+0 records in
300000+0 records out
real 0m36.669s
user 0m0.185s
sys 0m9.340s
因此写速度为:8*300000/1024/36.669=63.916M/s
三、测试磁盘读能力(读速度)
time dd if=/dev/sda1 of=/dev/null bs=8k
由于/dev/sdb1是一个物理分区,对它的读取会产生IO,/dev/null是伪设备,至关于黑洞,of到该设备不会产生IO,因此,这个命令的IO只发生在/dev/sdb1上,也至关于测试磁盘的读能力。(Ctrl+c终止测试)
输出的结果相似:
448494+0 records in
448494+0 records out
real 0m51.070s
user 0m0.054s
sys 0m10.028s
因此sda1上的读取速度为:8*448494/1024/51.070=68.61M/s
上面指的是从if的路径写到of的路径,或者从if的路径输出到of的路径
bs的命令使用形式是:bs=xxx count=mmm
含义:bs=600 count=1,备份第一块为600个字节的区域.(默认大小为512个字节)
bs=512 count=2,备份前2块总共为1024个字节的区域
dd的输出是:
x+y records in
m+n records out
其中 x和m的含义是 x和m个完整的块(也就是你用bs指定的块大小)被读入和写出。
其中y和n的含义是 y和n个不完整的块(部分块)被读入和写出。
最多见产生的不完整块的读入是因为碰到了读入的文件尾,好比你有一个文件a.log的大小是10个字节,你用下面的命令就会出现1+1的状况,由于第二个块不够6个字节,只有4字节。
dd if=a.log of=b.log bs=6 count=21+1 records in1+1 records out常见的出现0+0的状况是因为被读的文件是空文件(0字节),
好比下面的命令dd if=/dev/null of=b.log bs=6 count=20+0 records in0+0 records out
四、测试同时读写能力
time dd if=/dev/sdb of=/testrw.dbf bs=4k
在这个命令下,一个是物理分区,一个是实际的文件,对它们的读写都会产生IO(对/dev/sdb是读,对/testrw.dbf是写),假设它们都在一个磁盘中,这个命令就至关于测试磁盘的同时读写能力。
五、测试纯写入性能
dd if=test of=/dev/null bs=8k count=10000 iflag=direct
命令结尾添加oflag=direct将跳过内存缓存,添加oflag=sync将跳过hdd缓存。
六、测试纯读取性能
dd if=test of=/dev/null bs=8k count=10000 iflag=direct
eg1:Router上进行读写测试脚本:
#!/bin/sh rm /mnt/mmcblk0p1/ddtest 'dev下面的mmcblk0p1的设备,mnt下面的mmcblk0p1是个目录,才能够读写 mytime=1 while [ 1 ] do echo "===NO."$mytime" TEST===" time dd if=/dev/zero of=/mnt/mmcblk0p1/ddtest bs=8k count=10240 ’mmcblk0p1下建立ddtest文件夹,往文件夹里写入数据 sleep 5 rm /mnt/mmcblk0p1/ddtest sleep 3 echo "" let mytime=mytime+1 done
写一块是8k 一共写了10240块 数据一共是 8k*10240 = 80M
注意:dd 只能提供一个大概的测试结果,并且是连续 I/O 而不是随机 I/O,理论上文件规模越大,测试结果越准确。 同时,iflag/oflag 提供 direct 模式,direct 模式是把写入请求直接封装成 I/O 指令发到磁盘,非 direct 模式只是把数据写入到系统缓存就认为 I/O 成功,并由操做系统决定缓存中的数据何时被写入磁盘。(参考连接:http://www.360doc.com/content/15/0906/17/8737500_497292503.shtml)
【测试说明】
纯读:time dd if=/dev/mmcblk1p3 of=/dev/null bs=8k
纯写:time dd if=/dev/zero of=/ysdisk/iotest bs=8k count=102400
屡次测试,取平均值
*******************************************
【特定场景的io分析】
构造特定场景,记录经过命令iostat -zx 1查看并记录当前io状况