VdBench使用手册.docx

VdBench使用手册.docx

《VdBench使用手册.docx》由会员分享，可在线阅读，更多相关《VdBench使用手册.docx（12页珍藏版）》请在冰豆网上搜索。

VdBench使用手册

VdBench测试指导手册

1VdBench介绍

1.1简介

Vdbench是一个命令行实用程序，旨在帮助工程师和客户生成用于验证存储性能和存储数据完整性的磁盘I/O负载。

还可通过输入文本文件指定Vdbench执行参数。

它是一个免费的工具，容易使用，而且常常用于测试和基准测试。

2IOmeter安装

2.1Windows下的安装

1.打开  并下载该工具。

2.安装32位的JDK或JRE环境，并且设置环境变量，如下图所示。

3.解压缩VdBench.zip,用命令行转到VdBench的目录，执行vdbench-t进行测试。

如下图，即为成功：

2.2Linux下的安装

以下是下载和在Linux下安装vdbench。

1.打开 

 并下载该工具。

2.使用WinSCP工具将它传输到Linux主机。

将它解压到Linux/var/www/html目录。

清单3.解压WinSCP

[root&vhost4377idcuser]#mvvdbench504.zip/var/www/html/

[root&vhost4377idcuser]#cd/var/www/html/

[root&vhost4377html]#mkdirvdbench504

[root&vhost4377html]#unzipvdbench504.zip–dvdbench504/

[root&vhost4377html]#cdvdbench504

3.要运行该工具，您需要安装Java运行时环境，在本例中安装OracleJDK。

清单4.安装Java运行时环境

[idcuser&vhost4377~]$sudo–s|cd

[root&vhost4377~]#wget

[root&vhost4377~]#rpm–ivhjdk-7u3-linux-i586.rpm

[root&vhost4377~]#vi.bashrc

JAVA_HOME=/usr/java/jdk1.7.0_03

CLASSPATH=.:

$JAVA_HOME/lib/tools.jar

PATH=$JAVA_HOME/bin:

$PATH

exportJAVA_HOMECLASSPATHPATH

[root&vhost4377~]#source.bashrc

4.启动基准测试之前，使用默认的参数检查安装是否成功完成。

[root&vhost4377vdbench504]#./vdbench-t

3VdBench使用

3.1Vdbench运行及结果查看

./vdbench-fparafile

parafiile为配置文件，如果需要校验文件一致性可以可以指定-v参数，./vdbench-vfparafile。

在vdbench安装目录下面有output目录，可以查看运行及输出结果，适用于windows及linux。

3.2编写一个parmfile

要更详细地控制工具参数，编写一个parmfile，您可在其中指定不同的选项。

3.2.1块设备

对于一个块设备，配置以下参数：

HD：

主机定义

•如果您希望展示当前主机，则设置hd=localhost。

如果希望指定一个远程主机，hd=label。

•system=IP地址或网络名称。

•clients=用于模拟服务器的正在运行的客户端数量。

SD：

存储定义

•sd=标识存储的名称。

•host=存储所在的主机的ID。

•lun=原始磁盘、磁带或文件系统的名称。

vdbench也可为您创建一个磁盘。

•threads=对SD的最大并发I/O请求数量。

默认为8。

•hitarea=调整读取命中百分比的大小。

默认为1m。

•openflags=用于打开一个lun或一个文件的flag_list。

WD：

工作负载定义

•wd=标识工作负载的名称。

•sd=要使用的存储定义的ID。

•host=要运行此工作负载的主机的ID。

默认设置为localhost。

•rdpct=读取请求占请求总数的百分比。

•rhpct=读取命中百分比。

默认设置为0。

•whpct=写入命中百分比。

默认设置为0。

•xfersize=要传输的数据大小。

默认设置为4k。

•seekpct=随机寻道的百分比。

可为随机值。

•openflags=用于打开一个lun或一个文件的flag_list。

•iorate=此工作负载的固定I/O速率。

RD：

运行定义

•rd=标识运行的名称。

•wd=用于此运行的工作负载的ID。

•iorate=（#,#,...）一个或多个I/O速率。

•curve：

性能曲线（待定义）。

•max：

不受控制的工作负载。

•elapsed=time：

以秒为单位的运行持续时间。

默认设置为30。

•warmup=time：

加热期，最终会被忽略。

•distribution=I/O请求的分布：

指数、统一或确定性。

•pause=在下一次运行之前休眠的时间，以秒为单位。

•openflags=用于打开一个lun或一个文件的flag_list。

3.2.2文件系统

对于一个文件系统，配置以下参数：

HD：

主机定义。

与虚拟块设备相同。

FSD：

文件系统定义

•fsd=标识文件系统定义的名称

•anchor=将在其中创建目录结构的目录

•width=要在定位符下创建的目录数

•depth=要在定位符下创建的级别数

•files=要在最低级别创建的文件数

•sizes=（size,size,...）将创建的文件大小

•distribution=bottom（如果希望仅在最低级别创建文件）和all（如果希望在所有目录中创建文件）

•openflags=用于打开一个文件系统（Solaris）的flag_list

FWD：

文件系统工作负载定义

•fwd=标识文件系统工作负载定义的名称。

•fsd=要使用的文件系统定义的ID。

•host=要用于此工作负载的主机的ID。

•fileio=random或sequential，表示文件I/O将执行的方式。

•fileselect=random或sequential，标识选择文件或目录的方式。

•xfersizes=数据传输（读取和写入操作）处理的数据大小。

•operation=mkdir、rmdir、create、delete、open、close、read、write、getattr和setattr。

选择要执行的单个文件操作。

•rdpct=（仅）读取和写入操作的百分比。

•threads=此工作负载的并发线程数量。

每个线程需要至少1个文件。

RD：

运行定义

•fwd=要使用的文件系统工作负载定义的ID。

•fwdrate=每秒执行的文件系统操作数量。

•format=yes/no/only/restart/clean/directories。

在开始运行之前要执行的操作。

•operations=覆盖fwd操作。

选项相同。

3.3结果查看

运行之后的输出文件夹文件

每次运行后，vdbench会创建一个包含以下文件的输出文件夹：

errorlog.html

当为测试启用了数据验证时，它可包含一些数据块中的错误的相关信息：

•无效的密钥读取

•无效的lba读取（一个扇区的逻辑字节地址）

•无效的SD或FSD名称读取

•数据损坏，即使在使用错误的lba或密钥时

•数据损坏

•坏扇区

flatfile.html

包含vdbench生成的一种逐列的ASCII格式的信息。

histogram.html

一种包含报告柱状图的响应时间、文本格式的文件。

logfile.html

包含Java代码写入控制台窗口的每行信息的副本。

logfile.html主要用于调试用途

parmfile.html

显示已包含用于测试的每项内容的最终结果

resourceN-M.html、resourceN.html、resourceN.var_adm_msgs.html

•摘要报告

•stdout/stderr报告

•主机N的摘要报告

•最后“nn”行文件/var/adm/messages和/var/adm/messages。

每个M个JVM/Slave的目标主机N和主机N上为0。

sdN.histogram.html、sdN.html

每个N存储定义的柱状图和存储定义“N”报告。

summary.html

主要报告文件，显示为在每个报告间隔的每次运行生成的总工作负载，以及除第一个间隔外的所有间隔的加权平均值。

•interval：

报告间隔序号

•I/Orate：

每秒观察到的平均I/O速率

•MBsec：

传输的数据的平均MB数

•bytesI/O：

平均数据传输大小

•readpct：

平均读取百分比

•resptime：

以读/写请求持续时间度量的平均响应时间。

所有vdbench时间都以毫秒为单位。

•respmax：

在此间隔中观察到的最大响应时间。

最后一行包含最大值总数。

•respstddev：

响应时间的标准偏差

•cpu%sys+usr：

处理器繁忙=100（系统+用户时间）（Solaris、Windows、Linux）

•cpu%sys：

处理器利用率：

系统时间

swat_mon.txt，swat_mon_total.txt

•vdbench与SunStorageTekTMWorkloadAnalysisTool（Swat）TraceFacility（STF）相结合，支持您重放使用Swat创建的一个轨迹的I/O工作负载。

•Swat使用CreateReplayFile选项创建和处理的轨迹文件会创建文件flatfile.bin（flatfile.bin.gz用于vdbench403和更高版本），其中包含Swat所识别的每个I/O操作的一条记录。

•这些文件包含一个格式化的报告，可将该报告导入SwatPerformanceMonitor（SPM）中来创建性能图表。

3.4单客户运行vdbench

单客户的配置文件：

fsd=fsd1,anchor=/tmp/yht,depth=1,width=100,files=100,size=200M

fwd=fwd1,fsd=fsd1,operation=write,xfersize=1024k,fileio=sequantial,fileselect=sequantial,threads=32

rd=rd1,fwd=fwd1,fwdrate=max,format=restart,elspsed=600,interval=10

解读：

第一行：

文件系统存储定义。

指定目录结构，anchor是挂载点，/tmp/yht为linux客户端，如果是windows客户端需要改为c:

\\yht，其他部分相同。

depth是目录结构的深度，width是每一层目录的数量，files是每个目录下面文件的数量，size是文件大小，size=（100M,30,200M,30,1G,40）指定100M文件占30%，200M文件占30%，1G文件占40%。

第二行：

文件系统工作负载定义。

fsd，指定文件系统存储定义，fsd=（fsd1-fsdn）。

operation是最终操作，create是创建，write是改写，read是读，可以指定rdpct=80，意味着读写比例是80%。

xfersize是文件io大小，xfersize=（4k,40,64k,40,1m,20），指定每种io所占的比例。

fileio和fileselect是文件操作方式，均区分sequantial和random，threads是operation的线程数。

第三行：

运行定义，执行工作强度和时长。

fwd，指定文件系统工作负责，fwd=（fwd1-fwdn）。

fwdrate是每秒的操作数，max是不做限制，按最大强度自适应，也可以设置指定大小或递增变化等。

format是文件预处理参数，有三个选择，“no”不改变当前文件目录结构，"yes"是删除当前的目录结构，重新安装fsd的要求来生成新的，"restart"是只创建那些不够的文件以及扩展那些大小不足的文件。

interval是结果输出的间隔，每十秒输出一次。

上面的配置参数意味着，使用单客户端，对/tmp/yht目录创建目录深度为1，宽度为100的目录，每个目录下面有100个200M的文件（第一行）。

定义文件工作负载，指定文件系统存储定义fsd1，修改写这个目录下的文件，文件io大小为1m，线程数是32（第二行）。

运行定义，指定文件系统工作负载，如果目录文件不存在就重新建立，先创建文件，接着修改写文件，持续时间为10分钟。

3.5Linux下联机运行

1.每个客户的都需要安装vdbench，路径保持一致。

2.SSH互相，选一个客户的为父节点，把每个子节点都信任父节点。

父节点为93.93.41.5，子节点为93.93.41.6

ssh-keygen-trsa生成秘钥

chmod755/root/.ssh/修改生成秘钥的权限

scp/root/.ssh/id_rsa.pub93.93.41.6:

/root/.ssh/authorized_keys拷贝公钥

3.验证SSH互信

在父节点上ssh每一个子节点，如果不需要输入秘钥就能登录，则互信成功。

4.多客户端配置文件

hd=default,dbench=/home/Vdbench/,user=root,shell=ssh

hd=hd1,system=93.93.31.7

hd=hd2,system=93.93.41.8

hd=hd3,system=93.93.41.9

fsd=fsd1,anchor=/tmp/yht/client1,depth=2,width=100,files=2000,size=100m,shared=yes

fsd=fsd2,anchor=/tmp/yht/client2,depth=1,width=1000,files=2000,zies=（20m,40,100m,60）,shared=yes

fsd=fsd3,anchor=/tmp/yht/client3,depth=1000,width=1,files2000,size=1m,shared=yes

fwd=fwd1,fsd=fsd1,host=hd1,operation=read,xfersize=（1m,40,64k,60）,fileio=random,fileselect=sequantial,threads=32

fwd=fwd2,fsd=fsd2,host=hd2,operation=write,xfersize=64k,fileio=random,fileselect=sequantial,threads=32

fwd=fwd3,fsd=fsd3,host=hd3,rdpct=60,xfersize=4k,fileio=random,fileselect=sequantial,threads=32

rd=rd1,fwd=（fwd1-fwd3）,fwdrate=max,format=restart,elapesed=600,interval=10

注：

fsd中shared，vdbench不允许不同的slave之间共享同一个目录结构下的所有文件，因为这样会带来很大的开销，

但是它们允许共享同一个目录结构。

加入设置了shared=yes，那么不同的slave可以平分一个目录下所有的文件

来进行访问，相当于每个slave有各自等分的访问区域，因此不能测试多个客户的对同一个文件的读写。

3.6windows下联机运行

1.安装vdbench，确保每个客户端安装目录相同。

启动vdbench后台服务，用于联机运行，在子服务器vdbench安装目录下运行./vdbenchrsh，用来启动后台联机服务

2.修改hosts参数，修改每主机系统盘C:

\Windows\System32\drivers\etc\hosts文件，添加所有主机的ip和用户名。

3.配置文件

hd=default,vdbench=c:

\vdbench,shell=vdbench

hd=hd1,system=93.93.41.10

hd=hd2,system=93.93.41.11

hd=hd3,system=93.93.41.12

fsd=default,depth=1,width=1,files=100,size=1G,shared=yes

fsd=fsd1,anchor=m:

\\yht\\client1

fsd=fsd2,anchor=m:

\\yht\\client2

fsd=fsd3,anchor=m:

\\yht\\client3

fwd=default,rdpct=60,xfersize=1M,fileio=random,fileselect=sequantial,threads=32

fwd=fwd1,fsd=fsd1,host=hd1

fwd=fwd2,fsd=fsd2,host=hd2

fwd=fwd3,fsd=fsd3,host=hd3

rd=rd1,fwd=（fwd1-fwd3）,fwrate=max,format=restart,elapsed=60,interval=10