1. 介绍html
LoadRunner 是很是有名的商业性能测试工具,功能很是强大。使用也比较复杂,目前大多介绍性能测试的书籍都以该工具为基础,甚至有些书整本都在介绍 LoadRunner 的使用。python
Jmeter 一样是很是有名的开源性能测试工具,功能也很完善,在本书中介绍了它做为接口测试工具的使用。但实际上,它是一个标准的性能测试工具。关于Jmeter相关的资料也很是丰富,它的官方文档也很完善。ios
Locust 一样是性能测试工具,虽然官方这样来描述它 “An open source load testing tool.” 。但其它和前面两个工具备着较大的不一样。相比前面两个工具,功能上要差上很多,但它也并不是优势全无。git
正是基于这样的特色,使我选择使用Locust工具来作性能测试,另一个缘由是它可让咱们换一种方式认识性能测试,可能更容易看清性能测试的本质。github
我想已经成功的引发了你的兴趣,那么接下来就跟着来学习Locust的使用吧。web
方式一:经过 pip 命令安装算法
pip install locust
方式二:GitHub下载安装编程
GitHub项目地址:https://github.com/locustio/locust/json
将项目克隆下来,经过Python 执行 setup.py 文件api
python setup.py install
from locust import HttpLocust, TaskSet, task
# 定义用户行为
class UserBehavior(TaskSet):
def baidu_index(self):
self.client.get("/")
class WebsiteUser(HttpLocust):
task_set = UserBehavior
min_wait = 3000
max_wait = 6000
WebsiteUser类用于设置性能测试。
locust -f ./locustfile.py --host=https://www.baidu.com
#[2019-07-04 15:40:11,348] tsbc.leaptocloud/INFO/locust.main: Starting web monitor at *:8089
#[2019-07-04 15:40:11,348] tsbc.leaptocloud/INFO/locust.main: Starting Locust 0.11.1
经过浏览器访问:http://127.0.0.1:8089(Locust启动网络监控器,默认为端口号为: 8089)
设置模拟用户数。
设置孵化率 每秒产生(启动)的虚拟用户数。
点击 “启动” 按钮,开始运行性能测试。
性能测试参数分析
在Locust类
中,具备一个client
属性,它对应着虚拟用户做为客户端所具有的请求能力,也就是咱们常说的请求方法。一般状况下,咱们不会直接使用Locust
类,由于其client
属性没有绑定任何方法。所以在使用Locust
时,须要先继承Locust类
,而后在继承子类中的client
属性中绑定客户端的实现类。
对于常见的HTTP(S)
协议,Locust
已经实现了HttpLocust
类,其client
属性绑定了HttpSession
类,而HttpSession
又继承自requests.Session
。所以在测试HTTP(S)
的Locust脚本
中,咱们能够经过client
属性来使用Python requests
库的全部方法,包括GET/POST/HEAD/PUT/DELETE/PATCH
等,调用方式也与requests
彻底一致。另外,因为requests.Session
的使用,所以client
的方法调用之间就自动具备了状态记忆的功能。常见的场景就是,在登陆系统后能够维持登陆状态的Session
,从然后续HTTP请求操做都能带上登陆态。
而对于HTTP(S)
之外的协议,咱们一样可使用Locust
进行测试,只是须要咱们自行实现客户端。在客户端的具体实现上,可经过注册事件的方式,在请求成功时触发events.request_success
,在请求失败时触发events.request_failure
便可。而后建立一个继承自Locust类
的类,对其设置一个client
属性并与咱们实现的客户端进行绑定。后续,咱们就能够像使用HttpLocust类
同样,测试其它协议类型的系统。
在Locust类
中,除了client
属性,还有几个属性须要关注下:
task_set
: 指向一个TaskSet
类,TaskSet
类定义了用户的任务信息,该属性为必填;max_wait/min_wait
: 每一个用户执行两个任务间隔时间的上下限(毫秒),具体数值在上下限中随机取值,若不指定则默认间隔时间固定为1秒;host
:被测系统的host,当在终端中启动locust
时没有指定--host
参数时才会用到;weight
:同时运行多个Locust类
时会用到,用于控制不一样类型任务的执行权重。测试开始后,每一个虚拟用户(Locust实例
)的运行逻辑都会遵循以下规律:
WebsiteTasks
中的on_start
(只执行一次),做为初始化;WebsiteTasks
中随机挑选(若是定义了任务间的权重关系,那么就是按照权重关系随机挑选)一个任务执行;Locust类
中min_wait
和max_wait
定义的间隔时间范围(若是TaskSet类
中也定义了min_wait
或者max_wait
,以TaskSet
中的优先),在时间范围中随机取一个值,休眠等待;2~3
步骤,直至测试任务终止。from locust import HttpLocust, TaskSet, task
class UserTask(TaskSet):
def tc_index(self):
self.client.get("/")
class UserOne(HttpLocust):
task_set = UserTask
weight = 1
min_wait = 1000
max_wait = 3000
stop_timeout = 5
host = "https://www.baidu.com"
class UserTwo(HttpLocust):
weight = 2
task_set = UserTask
host = "https://www.baidu.com"
一个Locust实例被挑选执行的权重,数值越大,执行频率越高。在一个 locustfile.py 文件中能够同时定义多个 HttpLocust 子类,而后分配他们的执行权重,例如:
而后在终端启动测试:
locust -f locustfile.py UserOne UserTwo
性能测试工具要模拟用户的业务操做,就须要经过脚本模拟用户的行为。在前面的比喻中说到,TaskSet类
比如蝗虫的大脑,控制着蝗虫的具体行为。
具体地,TaskSet类
实现了虚拟用户所执行任务的调度算法,包括规划任务执行顺序(schedule_task
)、挑选下一个任务(execute_next_task
)、执行任务(execute_task
)、休眠等待(wait
)、中断控制(interrupt
)等等。在此基础上,咱们就能够在TaskSet
子类中采用很是简洁的方式来描述虚拟用户的业务测试场景,对虚拟用户的全部行为(任务)进行组织和描述,并能够对不一样任务的权重进行配置。
在TaskSet
子类中定义任务信息时,能够采起两种方式,@task装饰器
和tasks属性
。
采用@task装饰器
定义任务信息时,描述形式以下:
from locust import TaskSet, task
class UserBehavior(TaskSet):
1) (
def test_job1(self):
self.client.get('/job1')
2) (
def test_job2(self):
self.client.get('/job2')
tasks属性
定义任务信息时,描述形式以下:
from locust import TaskSet
def test_job1(obj):
obj.client.get('/job1')
def test_job2(obj):
obj.client.get('/job2')
class UserBehavior(TaskSet):
tasks = {test_job1:1, test_job2:2}
# tasks = [(test_job1,1), (test_job1,2)] # 两种方式等价
test_job2
的频率是test_job1
的两倍。1:1
。from locust import TaskSet, task
class UserBehavior(TaskSet):
def test_job1(self):
self.client.get('/job1')
def test_job2(self):
self.client.get('/job2')
from locust import TaskSet
def test_job1(obj):
obj.client.get('/job1')
def test_job2(obj):
obj.client.get('/job2')
class UserBehavior(TaskSet):
tasks = [test_job1, test_job2]
class MyTaskSequence(TaskSequence):
1) (
def first_task(self):
pass
2) (
def second_task(self):
pass
3) (
10) (
def third_task(self):
pass
@seq_task
使用@task
装饰器进行组合,固然您也能够在TaskSequences中嵌套TaskSet,反之亦然。sys.path.append(os.getcwd())
在导入任何公共库以前写入您的locust文件 - 这将使项目成为root(即当前正在工做)目录)可导入。
__init__.py
common/
__init__.py
config.py
auth.py
locustfiles/
__init__.py
web_app.py
api.py
ecommerce.py
sys.path.append(os.getcwd())
import common.auth
每一个发出请求的方法还须要两个额外的可选参数,这些参数是特定于Locust的,而且在python-requests中不存在。这些是:
request
(
方法
,
网址
,
名称=无
,
catch_response = False
,
** kwargs
)
构造并发送一个requests.Request
。返回requests.Response
对象。
参数: |
|
---|
from locust import HttpLocust, TaskSet, task
class UserTask(TaskSet):
def job(self):
with self.client.get('/', catch_response = True) as response:
if response.status_code == 200:
response.failure('Failed!')
else:
response.success()
class User(HttpLocust):
task_set = UserTask
min_wait = 1000
max_wait = 3000
host = "https://www.baidu.com"
catch_response = True :布尔类型,若是设置为 True, 容许该请求被标记为失败。
经过 client.get() 方法发送请求,将整个请求的给 response, 经过 response.status_code 得请求响应的 HTTP 状态码。若是不为 200 则经过 response.failure('Failed!') 打印失败!
from lxml import etree
from locust import TaskSet, task, HttpLocust
class UserBehavior(TaskSet):
def get_session(html):
tree = etree.HTML(html)
return tree.xpath("//div[@class='btnbox']/input[@name='session']/@value")[0]
10) (
def test_login(self):
html = self.client.get('/login').text
username = 'user@compay.com'
password = '123456'
session = self.get_session(html)
payload = {
'username': username,
'password': password,
'session': session
}
self.client.post('/login', data=payload)
class WebsiteUser(HttpLocust):
host = 'http://debugtalk.com'
task_set = UserBehavior
min_wait = 1000
max_wait = 3000
from locust import TaskSet, task, HttpLocust
import queue
class UserBehavior(TaskSet):
def test_register(self):
try:
data = self.locust.user_data_queue.get()
except queue.Empty:
print('account data run out, test ended.')
exit(0)
print('register with user: {}, pwd: {}'\
.format(data['username'], data['password']))
payload = {
'username': data['username'],
'password': data['password']
}
self.client.post('/register', data=payload)
class WebsiteUser(HttpLocust):
host = 'http://debugtalk.com'
task_set = UserBehavior
user_data_queue = queue.Queue()
for index in range(100):
data = {
"username": "test%04d" % index,
"password": "pwd%04d" % index,
"email": "test%04d@debugtalk.test" % index,
"phone": "186%08d" % index,
}
user_data_queue.put_nowait(data)
min_wait = 1000
max_wait = 3000
YAML/JSON
脚本,便可实现自动化测试、性能测试、线上监控、持续集成等多种测试需求。
pip install httprunner
在 HttpRunner 安装成功后,系统中会新增以下 5 个命令:
httprunner、hrun、ate 三个命令彻底等价,功能特性彻底相同,我的推荐使用hrun
命令。
运行以下命令,若正常显示版本号,则说明 HttpRunner 安装成功。
(locust) [root@tsbc api]# hrun -V
2.1.3
为了简化测试用例的编写工做,HttpRunner 实现了测试用例生成的功能。
首先,须要将抓取获得的数据包导出为 HAR 格式的文件,如:名称为 demo-quickstart.har。
而后,在命令行终端中运行以下命令,便可将 demo-quickstart.har 转换为 HttpRunner 的测试用例文件。
har2case docs/data/demo-quickstart.har -2y
INFO:root:Start to generate testcase.
INFO:root:dump testcase to YAML format.
INFO:root:Generate YAML testcase successfully: docs/data/demo-quickstart.yml
config
name testcase description
variables
test
name /api/get-token
request
headers
Content-Type application/json
User-Agent python-requests/2.18.4
app_version2.8.6
device_sn FwgRiO7CNA50DSU
os_platform ios
json
sign 9c0c7e51c91ae963c833a4ccbab8d683c4a90c98
method POST
url http //127.0.0.1 5000/api/get-token
validate
eq status_code 200
eq headers.Content-Type application/json
eq content.success true
eq content.token baNLX1zhFYP11Seb
test
name /api/users/1000
request
headers
Content-Type application/json
User-Agent python-requests/2.18.4
device_sn FwgRiO7CNA50DSU
token baNLX1zhFYP11Seb
json
name user1
password'123456'
method POST
url http //127.0.0.1 5000/api/users/1000
validate
eq status_code 201
eq headers.Content-Type application/json
eq content.success true
eq content.msg user created successfully.
如今咱们只须要知道以下几点:
如上即是 HttpRunner 测试用例的基本结构。
demo-quickstart.json
[
{
"config": {
"name": "testcase description",
"variables": {}
}
},
{
"test": {
"name": "/api/get-token",
"request": {
"url": "http://127.0.0.1:5000/api/get-token",
"method": "POST",
"headers": {
"User-Agent": "python-requests/2.18.4",
"device_sn": "FwgRiO7CNA50DSU",
"os_platform": "ios",
"app_version": "2.8.6",
"Content-Type": "application/json"
},
"json": {
"sign": "9c0c7e51c91ae963c833a4ccbab8d683c4a90c98"
}
},
"validate": [
{"eq": ["status_code", 200]},
{"eq": ["headers.Content-Type", "application/json"]},
{"eq": ["content.success", true]},
{"eq": ["content.token", "baNLX1zhFYP11Seb"]}
]
}
},
{
"test": {
"name": "/api/users/1000",
"request": {
"url": "http://127.0.0.1:5000/api/users/1000",
"method": "POST",
"headers": {
"User-Agent": "python-requests/2.18.4",
"device_sn": "FwgRiO7CNA50DSU",
"token": "baNLX1zhFYP11Seb",
"Content-Type": "application/json"
},
"json": {
"name": "user1",
"password": "123456"
}
},
"validate": [
{"eq": ["status_code", 201]},
{"eq": ["headers.Content-Type", "application/json"]},
{"eq": ["content.success", true]},
{"eq": ["content.msg", "user created successfully."]}
]
}
}
]
hrun
,后面直接指定测试用例文件的路径便可。
$ hrun docs/data/demo-quickstart-1.yml
locusts -f docs/data/demo-quickstart-1.yml