性能指标到底由谁来定?
群里的话题引发的思考:(性能测试的指标谁来定?)
众说风云:
1.产品人员决定
2.测试人员自己分析自己决定
3.不是,是由需求文档订的。不过测试人员也应该评审需求书,提前思考自己所需的指标性数据,然后让相关人员补充完整。
4.通常有标准的指标规范文档
其实回答这个问题,我们需要结合测试的产品进行分析;
我们先来了解一下什么是性能测试?
性能测试是通过自动化的测试工具模拟多种正常、峰值以及异常负载条件来对系统的各项性能指标进行测试。负载测试和压力测试都属于性能测试,两者可以结合进行。类型如下:
压力测试:强调极端暴力
稳定性测试:在一定压力下,长时间运行的情况
基准测试:在特定条件下的性能测试
负载测试:不同负载下的表现
容量测试:最优容量
在实际工作中我们经常会对两种类型软件进行测试:bs和cs,这两方面的性能指标一般需要哪些内容呢?
Bs结构程序一般会关注的通用指标如下(简):
Web服务器指标指标:
* Avg Rps: 平均每秒钟响应次数=总请求时间 / 秒数;
* Avg time to last byte per terstion (mstes):平均每秒业务脚本的迭代次数,有人会把这两者混淆;
* Successful Rounds:成功的请求;
* Failed Rounds :失败的请求;
* Successful Hits :成功的点击次数;
* Failed Hits :失败的点击次数;
* Hits Per Second :每秒点击次数;
* Successful Hits Per Second :每秒成功的点击次数;
* Failed Hits Per Second :每秒失败的点击次数;
* Attempted Connections :尝试链接数;
CS结构程序,由于一般软件后台通常为数据库,所以我们更注重数据库的测试指标:
* User 0 Connections :用户连接数,也就是数据库的连接数量;
* Number of deadlocks:数据库死锁;
* Buffer Cache hit :数据库Cache的命中情况
当然,在实际中我们还会察看多用户测试情况下的内存,CPU,系统资源调用情况。这些指标其实是引申出来性能测试中的一种:竞争测试。
使用各种资源(数据纪录,内存等),看他与其他相关系统对资源的争夺能力。
由于工程和项目的不同,所选用的度量,评估方法也有不同之处。
不过仍然有一些通用的步骤帮助我们完成一个性能测试项目。步骤如下:
1. 制定目标和分析系统2. 选择测试度量的方法
3. 学习的相关技术和工具
4. 制定评估标准
5. 设计测试用例
6. 运行测试用例
7. 分析测试结果
-------------------------------------------------------------------------------------------------------------------------
学习、分享,一起成长,改变生活!