jmeter中的几个重要测试指标释义

时间 2019-12-20

标签 jmeter 几个重要测试指标释义繁體版

原文原文链接

1、基本概念html

一、测试计划是使用jmeter进行测试的起点，它是其它jmeter测试元件的容器。java

二、线程组：表明必定数量的并发用户，它能够用来模拟并发用户发送请求。实际的请求内容在Sample中定义，它被线程组包含。能够在“测试计划->添加->线程组”来创建它，而后在线程组面板离有几个输入栏：Number of Threads(users)、Ramp-Up Period(in seconds)、loop count、其中Ram-Up Period(in seconds)表示在这个时间内建立完全部的线程。如：有8哥线程，Ramp-Up=200秒，那么线程的启动时间间隔为200/8=25秒，这样的好处是：一开始不会对服务器有太大的负载，线程组是为模拟鬓发负载而设计的。mysql

三、取样器（Sampler）:模拟各类请求。全部实际的测试任务都由取样器承担，存在不少请求。如：HTTP 、ftp请求等等。web

四、监听器：负责收集测试结果，同时耶被改制告终果显示的方式。功能是对取样器的请求结果显示，统计一些数据（吞吐量、KB/S）等。正则表达式

五、断言：用于判断请求响应的结果是否如用户所指望，是都正确。它能够用来隔离问题域，即在确保功能正确的前提下执行压力测试。这个限制对于有效测试时很是有用的。sql

六、定时器：负责定义请求（线程）之间的延迟间隔，模拟对服务器的连续请求。数据库

七、逻辑控制器：容许自定义jmeter发送请求的行为逻辑，它与Sampler结合使用能够模拟复杂的请求序列。express

八、配置元件维护Sampler须要的配置信息，并根据实际的须要会修改请求的内容。缓存

九、前置处理器和后置处理器负责在生成请求以前和以后完成工做。前置处理器经常用来修改请求的设置，后置处理器则经常用来处理响应的数据。安全

2、jmeter报告（转载）

http://www.cnblogs.com/jackei/archive/2006/11/13/558720.html

一、Aggregate Report 解析

Aggregate Report是jmeter经常使用的一个Listener,中文被翻译为“聚合报告”。若是作web应用的性能测试，例如：只有一个登陆请求，那么在Aggregate Report中，会显示一行数据，共有10哥字段，含义分别以下：

Label:每一个jmeter的element（例如HTTP Request）都有一个Name属性，这里显示的就是Name属性的值。

Samples：表示你此次测试中一共发出了多少个请求，若是模拟10个用户，每一个用户迭代10次，那么这里显示100

Average:平均响应时间-默认状况下是单个Request的平均响应时间，当使用了Transaction Controller时，也能够以Transaction为单位显示平均响应时间

Median：中位数，也就是 50％用户的响应时间

**90% Line：**90％用户的响应时间

Note：关于 50％和 90％并发用户数的含义，请参考下文
http://www.cnblogs.com/jackei/archive/2006/11/11/557972.html

Min：最小响应时间

Max：最大响应时间

Error%：本次测试中出现错误的请求的数量/请求的总数

Throughput：吞吐量——默认状况下表示每秒完成的请求数（Request per Second），当使用了 Transaction Controller 时，也能够表示相似 LoadRunner 的 Transaction per Second 数

KB/Sec：每秒从服务器端接收到的数据量，至关于LoadRunner中的Throughput/Sec

二、基本知识：

一、吞吐量：是指在没有帧丢失的状况下，设备可以接受的最大速率。

二、存储的最小单位是字节Byte,对于存储单位，有如下几个单位，GB、MB和KB，那么这三者之间的换算关系是：1GB=1024MB,1MB=1024KB,1KB=1024Bytes。

Bit："位"，称为bit,也就是比特，有时候也成为位。一个字节位8位二进制表示。

Byte：“字节”，一个字节就是8比特。

三、Mbps(million bits per second 兆位/秒) 表明每秒传输1，000，000比特。该缩写用来描述数据传输速度，例如：4Mbps=每秒钟传输4M比特。数据传输速率的单位，字母b（bit）是比特和字母B（Byte）shi zijie

四、吞吐量和带宽的区分：吞吐量和带宽是很容易搞混的一个词，二者的单位都是Mbps。咱们先来看下二者对应的英文，吞吐量：throughput；带宽：Max net bitrate。当咱们讨论通讯链路的带宽时，通常是指链路上每秒所能传送的比特数。咱们能够说以太网的带宽10Mbps。可是咱们须要区分链路上的可用带宽和实际链路钟每秒所能传送的比特数（吞吐量）。

　　咱们倾向于用“吞吐量”一次来表示一个系统的测试性能。这样，由于实现受各类低效率因素的影响，因此由一段带宽为10Mbps的链路链接的一对节点可能只达到2Mbps的吞吐量。这样就意味着，一个主机上的应用可以以2Mbps的速度向另外的一个主机发送数据。

五、方差和标准差都是用来描述一组数据的波动性的（集中仍是分散）。标准差的平方就是方差。方差越大，数据的波动越大。

B/S架构的软件，通常关注以下服务器性能指标

Avg Rps：平均每秒钟的响应次数＝总请求次数/秒数；

Avg time to last byte per tertian（mstes）：平均每秒业务脚本的迭代次数；

Successful Rounds：成功的请求；

Failed Rounds：失败的请求；

Hits Per Second：每秒点击次数；

Successful Hits Per Second：每秒成功的点击次数；

Failed Hits Per Second：每秒失败的点击数；

Attempted Connections：尝试链接数；

Throughput：吞吐率

C/S架构的程序，通常软件后台一般为数据库，因此咱们更注重数据库的测试指标

User Connections：用户链接数，也就是数据库的链接数量；

Number of Deadlocks：数据库死锁；

Butter Cache Hit：数据库Cache的命中状况。

在实际性能测试过程当中，须要观察的性能指标并不限于以上提到的这些，须要根据实际状况作出选择和权衡，有些指标如cpu占用率／内存占用率／数据库链接池，也有很是重要的参考意义

三．利用BadBoy生成测试计划（测试脚本）

badBoy能够很是容易的生成web的测试脚本。相似与LoadRunner的使用，输入站点的URL，点击Record开始录制。File –> Export to Jmeter ，导出为Jmeter认识的测试脚本。

四．一个简单的测试示例思路（目前本身思路，不断改进）

a．须要的“测试脚本”，对应web的应用使用badboy生成测试脚本。直接导入Jmeter，进行配置。

b．如图

TestPlan ：是整个Jmeter测试执行的容器。
ThreadGroup ：模拟请求，定义线程数、Ramp-Up Period、循环次数。
Step1 ：循环控制器，控制Sample的执行次数。
Sample取样器：决定进行那种类型的测试，如http、ftp等。
监听器：图形结果、聚合报告。
定时器：Random类型，定义线程请求的延迟。

c．聚合报告的解释

Label ：各个模拟测试的名称
Samples ：各个测试的样本总数
Average ：每一个请求的平均响应时间
Median ：中值，即50%请求的平均响应时间
90%Line ：90%请求的响应时间
Min ：最小响应时间，Max ：最大的响应时间
Error% ：错误响应的几率。即没法响应的几率。
ThroughPut ：吞吐量 – 默认状况下表示每秒完成的请求数（Request per Second）。
KB/Sec ：每秒从服务器端接收到的数据量。

五．Jmeter常见问题（转载）

http://www.51testing.com/?uid-128005-action-viewspace-itemid-84094

说明：这些问答是从网上转载的，本身修改了其中的一些内容，若是你们兴趣，能够将你们在使用Jmeter的时候碰到的问题写下来，咱们一块儿补充到这个问答里面，共同努力完善jmeter的资料。

JMeter的工做原理是什么？
向服务器提交请求；从服务器取回请求返回的结果。
JMeter的做用？
JMeter能够用于测试静态或者动态资源的性能（文件、Servlets、Perl脚本、Java对象、数据库和查询、ftp服务器或者其余的资源）。JMeter用于模拟在服务器、网络或者其余对象上附加高负载以测试他们提供服务的受压能力，或者分析他们提供的服务在不一样负载条件下的总性能状况。你能够用JMeter提供的图形化界面分析性能指标或者在高负载状况下测试服务器/脚本/对象的行为。
怎样能看到jmeter提供的脚本范例？
在\JMeter\jakarta-jmeter-2.0.3\xdocs\demos目录下。
怎样设置并发用户数？
选中可视化界面中左边树的Test Plan节点，单击右键，选择Add-> Thread Group,其中Number of Threads参数用来设置发送请求的用户数目。
JMeter的运行指示？
Jmeter在运行时，右上角有个单选框大小的小框框，运行是该框框为绿色，运行完毕后，该框框为白色。
User Parameters的做用是什么？
提升脚本可用性
在result里会出现彩色字体的http response code，说明什么呢？
Http response code是http返回值，彩色字体较引人注目，可使用户迅速关注。象绿色的302就说明在这一步骤中，返回值取自本机的catch，而不是server。
怎样计算Ramp-up period时间？
Ramp-up period是指每一个请求发生的总时间间隔，单位是秒。若是Number of Threads设置为5，而Ramp-up period是10，那么每一个请求之间的间隔就是10／5，也就是2秒。Ramp-up period设置为0，就是同时并发请求。
Get和Post的区别？
他们是http协议的2种不一样实现方式。Get是指server从Request URL取得所需参数。从result中的request中能够看到，get能够看到参数，可是post是主动向server发送参数，因此通常看不到这些参数的。
哪些缘由可能致使error的产生？
a. Http错误，包括不响应，结果找不到，数据错误等等；
b. JMeter自己缘由产生的错误。
为何Aggregate Report结果中的Total值不是真正的总和？
JMeter给结果中total的定义是并不彻底指总和，为了方便使用，它的值表现了所在列的表明值，好比min值，它的total就是所在列的最小值。下图就是total在各列所表示的意思。
JMeter的Thread Number是提供多个不一样用户并发的功能么？
不是，Thread Number仅仅是指并发数，若是须要实现多个不一样用户并发，咱们应该采用其它方法，好比经过在jmeter外创建csv文件的方法来实现。
同时并发请求时，若须要模拟不一样的用户同时向不一样的server并发请求，怎样实现呢？
方法很灵活，咱们能够将不一样的server在thread里面预先写好。或者预先将固定的变量值写入csv文件，这样还能够方便修改。而后将文件添加到User Parameters。
User Parameter中的DUMMY是什么意思？
当其具体内容是
${__CSVRead($
当测试对象在多server间跳转时，应该怎样处理？
程序运行时，有些http和隐函数会携带另外的server IP,咱们能够从他们的返回值中获取。
为什么测试对象是http和https混杂出现？
Https是加密协议，为了安全，通常不推荐使用http，可是有些地方，使用https过于复杂或者较难实现，会采用http协议。
Http和https的默认端口是什么？
Apache server (Http)的默认端口是80；
SSL (Https)的默认端口是443。
为什么在run时，有些页面失败，可是最后不影响结果？
缘由较多，值得说起的一种是由于主流页面与它不存在依赖关系，因此即便这样的页面出错，也不会影响运行获得正常结果，可是这样会影响到测试的结果以及分析结果。
为何脚本刚开始运行就有错误，其后来的脚本还可运行？
在Thread Group中有相关设置，若是选择了continue，即便前面的脚本出现错误，整个thread仍会运行直到结束。选择Stop Thread会结束当前thread；选择Stop Test则会结束所有的thread。推荐选项是Stop Thread。
在Regular expression_r Extractor会看到Template的值是1,这个值是什么意思呢？
1是指取第一个（）里面的值。若是Regular expression_r的数值有多个，用这种方法能够避免没必要要的麻烦。
Regular expression_r中的(.*)是什么意思？
那是一个正则表达式（regular expression_r）。’.’等同于sql语言中的’?’,表示无关紧要。’’表示0个或多个。’()’表示须要取值。(.)表达任意长度的字符串。
在读取Regular expression_r时要注意什么？
必定要保证所取数值的绝对惟一性。
怎样才能判断什么样的状况须要添加Regular expression_r Extractor？
检查Http Request中的Send Parameters,若是有某个参数是其前一个page中所没有给出的，就要到原文件中查找，并添加Regular expression_r Extractor到其前一page的http request中。
在自动获取的脚本中有时会出现空的http request，是什么意思呢？
是由于在获取脚本时有些错误，是脚本工具缘由。在run时这种错误不参与运行的。
在运行结果中为什么有rate为N/A的状况出现？
可能由于JMeter自身问题形成，再次运行能够获得正确结果。
经常使用http错误代码有哪些？
400没法解析此请求。
403禁止访问：访问被拒绝。
404找不到文件或目录。
405用于访问该页的HTTP动做未被许可。
410文件已删除。
500服务器内部错误。
501标题值指定的配置没有执行。
502 Web服务器做为网关或代理服务器时收到无效的响应。
Http request中的Send Parameters是指什么？
是指code中写定的值和自定义变量中获得的值，就是在运行页面时须要的参数。
Parameters在页面中是不断传递的么？
是的。参数再产生后会在页面中一直传递到所需页面。因此咱们能够在动态参数产生时捕获它，也能够在所需页面的上一页面捕获。(可是这样可能有错误，最好在产生页面获取)
在使用JMeter测试时，是彻底模拟用户操做么？形成的结果也和用户操做彻底相同么？
是的。JMeter彻底模拟用户操做，因此操做记录会所有写入DB.在运行失败时，可能会产生错误数据，这就取决于脚本检查是否严谨，不然错误数据也会进入DB，给程序运行带来不少麻烦。

六．Jmeter测试心得（转载）

http://www.javaeye.com/topic/211216

企业应用开发过程当中，性能测试是很重要的一个环节，在这个环节中Apache的JMeter以它开源、100%纯Java、操做方便等优势发挥着很大的做用。
通过一段时间的使用，多少有些心得和技巧，拿出来共享，但愿能有些帮助。

一、制做测试脚本：
手工制做测试脚本，须要你知道请求的url和携带的参数等等，太花费时间，
因此能够用badboy工具录制脚本。这个工具虽然不是开源的，可是却能够用来免费的录制成.jmx的脚本，使用起来很方便。
官方网站是：http://www.badboy.com.au/

二、出现乱码了？
在用JMeter发行HTTPRequest时，在请求参数中有中文时，发现存储到DB中后，相应的字段是乱码，
明明在参数后面的Encode选项中打了V。后来发现badboy录制脚本的时候并无记录编码方式，因此修改脚本，
在Content encoding中设置正确的编码方式就不会出现乱码了。

三、JMeter的妙用—准备测试数据：
要求性能测试开始前，先准备5W条数据。固然能够经过直接修改DB，可是若是这5W条数据涉及到不少表的关联，
甚至还要经过存储过程的处理怎么办，直接修改DB很容易出现错误的数据，要是在客户的机器上弄错，可就闯祸了。
这时候想到了JMeter，它原本是用来模拟大量用户并发请求的，如今用它来批量的生成数据吧。
若是要求每条数据都不一样，就要修改脚本，使用JMeter的函数来动态产生数据，比较经常使用的是CSVRead函数，
记不住名的话Ctrl+F能够呼唤出函数助手。使用这个函数的时候须要注意几点，首先是csv文件的编码格式，
使用ansi没有问题，使用unicode时会使读取的第一行数据出现错误；
${__CSVRead(data.txt,0)}—读取本行的第一列值$

四、JMeter中debug方法：
JMeter提供了log函数输出log，可是有时候并很差用，好比我想输出某个函数的返回值看是否是正确的，
${__log($

五、经常使用的功能：
1)使用HTTP Cookie Manager或URL重写实现同一线程内的多个请求共享Session。
2)把Login的请求放到只执行一次的控制器中，那么即便循环屡次，Login也只请求一次。
3)若是想让多个线程在同一时刻同时请求，那么用Synchronizing Timer来作集合点。
4)为了节省系统资源，使用非窗口模式运行JMeter（jmeter -n -t test.jmx）
5)若是模拟并发用户过多，好比200线程，那么能够分散到多台机器上运行Jmeter（好比4台电脑，每台50线程）
更多功能请参照使用手册
中文手册（未完成）http://wiki.javascud.org/pages/viewpage.action?pageId=5566

六、在winnt系统上，使用perfmon来帮助Jmeter采集服务器的系统资源数据，能够配置log输出这些数据做为性能瓶颈分析时使用。

七．置信区间 http://java.chinaitlab.com/tools/355421.html
对数据进行更科学的分析，肯定测试结果。相似于Jmeter聚合报告的90% Line给出的参考，而不能仅仅参考均值。

记：熟悉Jmeter使用以后，本身更应该关注的是“测试实践”，以及经过怎么样的方法改进性能。

Throughput（吞吐量）：按照常规理解网络吞吐量表示在单位时间内经过网卡数据量之和，其中即包括本机网卡发送出去的数据量也包括本机网卡接收到的数据量。一个100Mb(位)的双工网卡，最大发送数据的速度是12.5M字节/s ，最大接收数据的速度是12.5M字节/s，能够同时收发数据。
并发用户数：是同时执行操做的用户(线程数)。
响应时间：从请求发出到收到响应花费的时间。

QPS - Queries Per Second 每秒处理的查询数（若是是数据库，就至关于读取）
TPS - Transactions Per Second 每秒处理的事务数(若是是数据库，就至关于写入、修改)
IOPS，每秒磁盘进行的I/O操做次数

例如对某个数据库测试，分开两次测QPS与TPS。
QPS（读取）值老是高于TPS(写、改)，而且有倍率关系，由于：
一、数据库对查询可能有缓存。
二、机械硬盘或SSD硬盘的读就是比写快。

————————————————
版权声明：本文为CSDN博主「雨燕天涯狼」的原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处连接及本声明。
原文连接：https://blog.csdn.net/zhang_xiao8wan8/article/details/45814985

转载：https://www.cnblogs.com/insane-Mr-Li/p/10101283.html