软件效率测试-初级培训.ppt

软件效率测试 目标 本次培训的目标 了解效率测试的概念了解效率测试的常用手段了解效率测试的步骤掌握脚本录制方法掌握脚本的调试和修改方法掌握测试报告的编制方法了解测试数据的分析方法理解基本的性能指标 效率测试的定义 谈及系统的性能 其覆盖面非常广泛 对一个系统而言包括执行效率 设备效率和网络效率等性能测试用来保证产品发布后系统的性能满足用户需求 性能测试在软件质量保证中起着非常重要的作用 效率测试的目的 评估系统的能力识别体系中的弱点系统调优验证可伸缩性 resilience 和可靠性 reliability 用性能测试手段发现系统存在的问题设备选型提供部署方案的参考 效率测试的常用手段 基准测试并发测试递增测试场景测试极限测试 疲劳测试数据存储容量测试吞吐量测试 基准测试 基准测试是指测试环境确认以后 对业务模型中涉及的每种业务做基准测试 目的是获取单用户执行时的各项性能指标 为多用户并发和混合场景的性能测试性能分析提供参考依据 并发测试 并发测试是指并发不同数目的虚拟用户执行检查点操作 目的是对检查点进行压力加载测试 预测系统投入使用后在一定用户压力情况下的系统响应时间 根据此响应时间分析 确定系统存在的性能瓶颈 为系统的优化和调整提供依据 递增测试 递增测试是指每隔一定时间段 如5秒 10秒 并发不同数目的虚拟用户执行检查点操作 对检查点进行递增用户压力加载测试 从而模拟系统真实的使用情景 使用户预知系统投入使用后的性能水平 场景测试 根据历史数据统计结果以及系统用户的分布和使用频率 模拟不同用户执行不同操作 如10 的用户执行登录操作 50 的用户执行查询操作 40 的用户执行数据库更新操作 最大限度地模拟系统的真实场景 使用户预知系统投入使用后的真实性能水平 从而 对系统做出相应的优化及调整 避免实际情况中出现系统长时间不响应及崩溃的情况 极限测试 极限测试是指对系统核心功能点及可能存在压力瓶颈的功能点进行性能极限测试 即该功能点所能承受的最大用户并发数 通过极限测试 用户可预知系统投入使用后 能否满足实际的需求 疲劳测试 该测试是指对系统核心功能点进行疲劳强度测试 即用系统稳定运行情况下能够支持的最大并发用户数 持续执行一段业务时间 如48小时 记录交易平均响应时间 交易正确率 应用服务器和数据库服务器CPU利用率 内存使用情况等参数 考察应用服务器和数据库服务器是否出现宕机 内存泄漏等情况 该测试通常需要和场景测试进行结合 从而可以最大限度地模拟真实环境下 系统长时间连续运行条件下 系统是否能够保持在稳定运行状态 吞吐量测试 模拟多用户进行执行提交任务操作 测试系统单位时间内可执行任务数是否可以达到预期的指标 数据存储容量测试 数据库存储一定容量后 在不同的数据存储量情况下 重新执行各项操作 求得系统响应时间 比较不同数据存储容量情况下 执行不同任务操作的系统响应时间 使用户预知未来一段时间随着数据存储容量的变化 执行不同任务操作响应时间所发生的变化 网络性能测试 含义测试网络带宽 延迟 负载和端口的变化对用户的响应时间的影响实际应用主要是测试用户数目与网络带宽的关系 效率测试局限 不能穷尽所有的情况或案例不能100 的达到需求 效率测试的步骤 分析系统并制定测试目标选择相关技术和工具准备测试环境录制脚本并设计测试用例设计测试场景运行测试用例并确定系统健康运行监测后台资源分析测试结果并制作报告 分析系统并制定目标 分析系统系统类别系统构成系统功能制定目标确定客户需求和期望确定实际业务需求确定系统需求测试点通常按照4 8原则 时间占到整个测试周期的2 3以上登录 查询 数据更新操作 文件上传等 选择相关技术和工具 对各种性能测试工具进行评估选择符合现有软件架构的性能测试工具 设计测试场景 虚拟用户的操作步骤要尽量类似真实用户的操作操作的数据要类似于真实用户实际使用数据 以防止应用缓存技术对负载测试带来的负面影响在案例设计时要充分考虑到需求中用户对模块使用的频率 准备测试环境 系统使用何种操作系统需要监控哪些指标需要安装哪些服务是否需要准备数据需要哪些用户同一个用户是否可以重复使用 录制脚本并设计测试用例 从登录开始加入检查点尽可能模拟用户的数据一定要退出系统 logout 并发时加入同步点 修改调试脚本 发现脚本中动态内容出现的位置并用变量进行替换替换的方式分为 创建数据池文件 txt cvsordat 使用Central数据池 数据不能重复使用Local数据池 数据可循环使用通过ActiveData菜单插入变量值 运行测试用例并确定系统健康 通过并发两个用户确定脚本的可并发性不能只进行一次测试 初始化 缓存 网络 配置选项 选择脚本 用户数 机器 执行测试查看执行状态 进度 错误信息 查看测试结果 数据是否正确 license 采集数据停止测试 监测后台资源 网络访问方式 Agent方式 SNMP方式CPU内存磁盘网络 分析测试结果并制作报告 收集相关信息进行数据统计分析寻找性能瓶颈响应时间是否满足要求事务响应时间随用户变化图有无剧烈变化套用效率测试模板 测试工具培训基础 QALOADQALoad是进行性能测试 负载测试和强度测试的工具QALoad可以对应用负载测试一直达到应用最大并发用户数QALoad可以对应用进行强度测试 从而找到应用可承载的最大并发用户数QALoad可以测量应用的响应时间 给出应用的最终用户性能体验其它用途 系统优化 监测服务器资源 容量规划 基准性能指标 与其他工具结合获得更多的功能 QALOAD所支持的协议 通信层Winsock IIOP WWW WAP NetLoad数据层ODBC MSSQLServer Oracle OracleFormsServer Sybase DB2 ADO应用层SAP Tuxedo Uniface QARun JAVA QALOAD体系结构 Workbench PlayerMachines Conductor Analyze 20vu s 50vu s 75vu s ApplicationUnderTest QALoad的三大组成组件 安装环境 Windows环境 最新的补丁IEJDKVisulstudio 补丁PDF阅读器 工具演示 录制脚本修改脚本设置测试场景运行测试脚本分析测试数据制作测试报告 性能测试关注的主要指标 响应时间并发或在线用户数吞吐量 应用和数据库 内存 Memory 磁盘 PhysicalDisk 处理器 Processor 网络 响应时间 在某数据量的情况下 完成某功能模块所需要的时间 内存 Memory CommittedBytesinUseAvailableBytesPageFaults secPages sec 磁盘 PhysicalDisk DiskTimeIdleTimeAvg DiskQueueLengthCurrentDiskQueueLength 处理器 Processor ProcessorTimeUserTimeProcessorQueueLength 网络 BytesTotal secPackets sec 回顾效率测试流程 准备测试环境 选择测试工具 录