性能测试基础 ================================ 什么是软件性能 ------------------------ **定义**：软件的性能是软件的一种 **非功能特性** ，它关注的不是软件是否能够完成特定的功能，而是在完成该功能时展示出来的 **及时性**。 由定义可知性能关注的是软件的非功能特性，所以一般来说性能测试介入的时机是在功能测试完成之后。另外，由定义中的及时性可知性能也是一种指标，可以用时间或其它指标来衡量，通常我们会使用某些工具或手段来检测软件的某些指标是否达到了要求，这就是性能测试。 **性能测试定义**：指通过自动化的测试工具模拟多种正常、峰值以及异常负载条件来对系统的各项性能指标进行测试。 如何正确看待性能 -------------------------- 测试人员通常是做为软件质量控制的一个角色，不仅仅是找bug，需要对整个软件的质量负责，性能也属于质量的一部分，因此测试人员眼中的性能应该是全面的，考虑的东西也需要全面： * 测试人员需要考虑全面的性能，包括用户、开发、管理员等各个视角的性能。 * 测试人员在做性能测试时除开要关注表面的现象如响应时间，也需要关注本质，比如用户看不到的服务器资料利用率，架构设计是否合理？代码是否合理等言方方面面。 性能测试类型 ----------------------------- * 基准测试：在给系统施加较低压力时，查看系统的运行状况并记录相关数做为基础参考 * 负载测试：是指对系统不断地增加压力或增加一定压力下的持续时间，直到系统的某项或多项性能指标达到安全临界值，例如某种资源已经达到饱和状态等 * 压力测试：压力测试是评估系统处于或超过预期负载时系统的运行情况，关注点在于系统在峰值负载或超出最大载荷情况下的处理能力 * 稳定性测试：在给系统加载一定业务压力的情况下，使系统运行一段时间，以此检测系统是否稳定 * 并发测试：测试多个用户同时访问同一个应用、同一个模块或者数据记录时是否存在死锁或者其他性能问题 性能测试基本概念 ----------------------------- 响应时间 >>>>>>>>>>>>>>>>>>> * 定义：从用户发送一个请求到用户接收到服务器返回的响应数据这段时间就是响应时间 * 关键路径：下图为一次http请求经过的路径，请求会经过网络发送到web服务器进行处理，如果需要操作DB，再由网络转发到数据库进行处理，然后返回值给web服务器，web服务器最后把结果数据通过网络返回给客户端。 .. figure:: /_static/performance/get_time.jpg :width: 18.0cm * 计算方法：Response time = (N1+N2+N3+N4)+ (A1+A2+a3)，即：（网络时间 + 应用程序处理时间） * 响应时间-负载对应关系 .. figure:: /_static/performance/get_time2.jpg :width: 15.0cm 图中拐点说明： 1、响应时间突然增加 2、意味着系统的一种或多种资源利用达到的极限 3、通常可以利用拐点来进行性能测试分析与定位 吞吐量 >>>>>>>>>>>>>>>>>>>>>>>>>>>>>> * 定义：单位时间内系统处理的客户端请求的数量 * 计算单位：一般使用请求数／秒做为吞吐量的单位，出可以使用 页面数／秒表表示。另外，从业务角度来说也可以使用 访问人数 /天 或 页面访问量／天 做为单位。 * 计算方法：Throughput = (number of requests) / (total time). * 吞吐量-负载对应关系： .. figure:: /_static/performance/get_time3.png :width: 15.0cm 并发数 >>>>>>>>>>>>>>>>>>>>>>> **并发用户数**：某一物理时刻同时向系统提交请求的用户数，提交的请求可能是同一个场景或功能，也可以是不同场景或功能。 **在线用户数** ：某段时间内访问系统的用户数，这些用户并不一定同时向系统提交请求 **系统用户数** ：系统注册的总用户数据 **三者之间的关系** ：系统用户数 >= 在线用户数 >= 并发用户数 资源利用率 >>>>>>>>>>>>>>>>>>>>>>>>>>>> * 定义：指的是对不同系统资源的使用程度，通常以占用最大值的百分比来衡量 * 通常需要关注的服务器资源如下： 1、CPU：就像人的大脑，主要负责相关事情的判断以及实际处理的机制 2、内存：大脑中的记忆块区，将眼睛，皮肤等收集到的信息记录起来的地方，以供cpu进行判断，但是是临时的，访问速度快，如果关机或断电这里的数据会消失。 3、磁盘IO：大脑中的记忆区块，将重要的数据保存起来（永久保存，关机或断电不会丢失，速度慢），以便将来再次使用这些数据。 4、网络： * 资源利用-负载对应关系： .. figure:: /_static/performance/get_time4.png :width: 15.0cm 图中拐点说明： 1、服务器某荐资源使用逐渐达到饱和 2、通常可以利用拐点来进行性能测试分析与定位 其它常用概念 >>>>>>>>>>>>>>>>>>>>>>>> * TPS：Transactions Per Second，每秒事务数 * 思考时间：用户每个操作后的暂停时间，或者叫操作之间的间隔时间，此时间内是不对服务器产生压力的 * 点击数：每秒钟用户向WEB服务器提交的HTTP请求数。这个指标是WEB应用特有的一个指标:WEB应用是"请求-响应"模式,用户发出一次申请,服务器就要处理一次，所以点击是WEB应用能够处理的交易的最小单位。如果把每次点击定义为一个交易，点击率和TPS就是一个概念。容易看出，点击率越大，对服务器的压力越大。点击率只是一个性能参考指标，重要的是分析点击时产生的影响。需要注意的是，这里的点击并非指鼠标的一次单击操作，因为在一次单击操作中，客户端可能向服务器发出多个HTTP请求. **PV**：访问一个URL，产生一个PV（Page View，页面访问量），每日每个网站的总PV量是形容一个 网站规模的重要指标。 **UV**：作为一个独立的用户，访问站点的所有页面均算作一个UV（Unique Visitor，用户访问） 做好性能测试需要掌握的知识 >>>>>>>>>>>>>>>>>>>>>>>>>>>>> * 掌握一门编程语言 * 掌握计算机原理和操作系统知识 * 良好的网络基础 * 掌握数据库知识 * 中间件（apache,tomcat） * 常用抓包工具 * 性能测试工具 `参考出处 `_