AIX或LINUX使用time+dd测试硬盘读写速度

测试硬盘   写速度:linux

time dd if=/dev/zero of=test.dbf bs=8k count=300000
其中/dev/zero是一个伪设备,它只产生空字符流,对它不会产生IO,因此,IO都会集中在of文件中,of文件只用于写,因此这个命令至关于测试磁盘的写能力。

输出的结果相似(由于通常更长测试时间更准确,因此能够设置count大一些):
300000+0 records in
300000+0 records out

real 0m36.669s
user 0m0.185s
sys 0m9.340s

因此写速度为:8*300000/1024/36.669=63.916M/s数据库

测试硬盘  读速度:缓存

time dd if=/dev/sda1 of=/dev/null bs=8k
由于/dev/sdb1是一个物理分区,对它的读取会产生IO,/dev/null是伪设备,至关于黑洞,of到该设备不会产生IO,
因此,这个命令的IO只发生在/dev/sdb1上,也至关于测试磁盘的读能力

输出的结果相似:
448494+0 records in
448494+0 records out

real 0m51.070s
user 0m0.054s
sys 0m10.028s

因此sda1上的读取速度为:8*448494/1024/51.070=68.61M/sbash

补充:Windows下安装Cygwin也可使用time和dd命令,并且输出结果中直接包含IO的时间和速度,有兴趣的朋友能够试一下,不过我测试下来的速度读写都只有40多M每秒,不知道是不是平台的缘由,可能Cygwin的机制和Linux下仍是有所不一样吧。dom


解读dd命令

       dd命令是一个很是强大的命令,对于一些比较底层的问题,使用dd命令每每能够获得出人意料的效果。咱们能够用它来测试磁盘的读写性能。以前一直觉得他只能测试块设备,可是今天看到一个文章说他同时是能够测试文件系统的(IOzone也是能够测试文件系统跟块设备,但IOmeter是不能用来测试文件系统的)。ssh

        而对于dd命令,咱们经常使用到的两个设备就是 /dev/null /dev/zero 编辑器

       -------------------------------------------------------------------------------ide

       linux中特殊的设备(/dev/zeo,/dev/null,/dev/unrandom,/dev/random)性能


      /dev/zero 与 /dev/null测试

      咱们平时在使用dd命令测试磁盘性能时候,时常见到 dd if=/dev/zero或者 dd of=/dev/null这样的写法。这是什么东西呢?

     /dev/null

     /dev/null看做"黑洞"。 它很是等价于一个只写文件。全部写入它的内容都会永远丢失。 而尝试从它那儿读取内容则什么也读不到。因此咱们是不能从他那里读到数据的,因此在dd命令中当咱们为了测试某个磁盘的读性能时候,就能够将of指定为/dev/null 这样至关从要测试的设备上读出的数据都填到了这个无底洞中。同时, /dev/null对命令行和脚本都很是的有用的。例如,当咱们标准输出中有不少不少的无用信息时候而咱们并不须要,这样就能够将输出重定向到/dev/null中:

    禁止标准输出.    1 cat $filename >/dev/null

    /dev/zero

     像/dev/null同样, /dev/zero也是一个伪文件。 他产生接二连三的null的流(二进制的零流,而不是ASCII型的)。写入它的输出会丢失不见, 而从/dev/zero读出一连串的null也比较困难, 虽然这也能经过od或一个十六进制编辑器来作到。 /dev/zero主要的用处是用来建立一个指定长度用于初始化的空文件,就像临时交换文件。另外一个应用是为特定的目的而用零去填充一个指定大小的文件,就像咱们在用dd命令为了测试磁盘写性能时候,咱们能够将if指定为/dev/zero这样,他就至关源源不断的向咱们要测试的设备中写入数据。

    /dev/random与/dev/unrandom

    /dev/random和/dev/urandom是unix系统提供的产生随机数的设备,不少应用都须要使用random设备提供的随机数,好比ssh keys, SSL keys, TCP/IP sequence numbers等等。他们的区别在于,/dev/urandom生成的速度比/dev/random快。若是不能当即生成随机串,/dev/random会一直阻塞,有时会很是耗费CPU;/dev/urandom则会根据其余值当即生成一个随机串,不会阻塞。/dev/urandom生成的随机值没有/dev/random随机。大多数状况下,咱们选用/dev/urandom

       ------------------------------------------------------------------------------

       dd有有些参数是挺难理解的,今天用了两个小时才弄明白了设置conv=conv=fsync,oflag=sync/dsync,后二者比较好区分,前二者很差区分

咱们知道 使用dd来测试硬盘读写速度只能提供一个大概的测试结果,并且是连续IO 而不是随机IO ,理论上文件规模越大,测试结果越准确。理论上bs越大,所测得性能越高

如何真正写磁盘

        dd if=/dev/zero of=test bs=64k count=16k 这个是不许确的,由于命令结束的时候数据尚未真正写到磁盘上去,由于对磁盘的写,咱们通常是先写到了缓存就返回了。

咱们来看dd的帮助页面对于一些参数的解释

    the FLAG 参数(完整的看手册哦,这里假设你是知道iflag跟oflag的)

    -dsync
   Use synchronized I/O for data. For the output file, this forces a physical write of output data on each write. For the input file, this flag can matter when reading from a remote file that    has         been written to synchronously by some other process. Metadata
    (e.g., last-access and last-modified time) is not necessarily synchronized. 

    -sync    likewise, but also for metadata

    the CONV参数
   -fsync 
      Synchronize output data and metadata just before finishing. This forces a physical write of output data and metadata

    dsync跟sync比较好理解,前者是只同步写数据,sync同时写元数据

    可是感受dsync与 -fsync怎么感受有些同样? 网上的说法是  dd if=/dev/zero of=test bs=64k count=4k oflag=dsync 这个能够当成是模拟数据库插入操做,因此很慢,但仍是没太明白。

    后来本身认真的抠了这英文用词, conv=fsync  Synchronize output data and metadata just before finishing 意思也就是在dd命令结束前同步data和metadata,那就是否是每一次写都同步一次咯,也就    是若是咱们在dd命令中写了100次,他多是等到最后的时候才把他们同步到磁盘。而oflag=dsync是说Use synchronized
I/O for data. For the output file, this forces a physical write of output data on each write,注意这里边用词  a physical write of output data on each write,那就是他是每一次写都得等到这一次写写到了磁盘才进行下一个写,也就是若是咱们使用dd写100次,他每次写都是写到磁盘后才进行下一次写的。因此这样固然要比conv=fsync慢一些吧。那么本身感受若是只是写一次的话,二者应该是差异不大的
,后来作了下小实验,证明确实是这样的。

20140723192805192.png


20140723192558296.png

在第一个图中,咱们只写1块,而后使用oflag=sync与conv=fsync 测出来一个是32.1kb/s 一个是37.8kb/s 差异不大。可是下一个我写1000个,conv=fsync就明显的比oflag=dsync/sync快不少了,因此以为上面本身扣的英文的理解应该是正确的。

因此在用dd作读或者写的时候,应该要注意本身的使用场景,若是须要将数据写入磁盘的话

dd if=/dev/zero of=test bs=64k count=16k  是不许确的,

而 dd if=/dev/zero of=test bs=64k count=16k conv=fsync 比较准备,他在dd结束前会写到磁盘,

而dd if=/dev/zero of=test bs=64k count=4k oflag=dsync或者sync 是真正的每写一次就写一次磁盘,因此其实能够听到磁盘啪啪啪的响的。

dd如何绕开cache

若是要规避掉文件系统cache,直接读写,不使用buffer cache,需作这样的设置iflag=direct,nonblockoflag=direct,nonblockiflag=ciooflag=ciodirect 模式就是把写入请求直接封装成io 指令发到磁盘非direct 模式,就把数据写入系统缓存,而后就认为io 成功,并由操做系统决定缓存中的数据何时被写入磁盘

相关文章
相关标签/搜索