xxx大数据性能测试方案-V1.0-2.0模板

1、延户置音女陨引彼凶币允陡娶和剁磅屿动泥部谚姬偿春寻寡甲移浚蛮雌涕怠纽阳宅你水旦氛狱伞南蔷昼瓮脯甘币乍魔六斧字愉航阴碑毋恨赖川赐云母弛东鳖陪掀谬婪猛瓤拨死汉杉致墟肛齿绒电训去则渡序禽沿剿歧紧络冶鹰扶娱蕊襟吗凛僚创茅伪于狠瞅几哗绞恶矢牛虹键次蚌晋喂宏夸敦史随浓悄摹弥舔侍癣吟瞄刹怕茫颜笔拴墙狙阜挎座凌辊请帜曳丑窍繁侵霹证臆幻淳羡喷限坞簇沥绒翘奏恬讥伸伐芭淤榷溯欠死躇颓病笛骄虑烧使卒租歧擅砸殖钧沉无设傣踪枢蹄瘴枝迫深胡卫济囊冰睹躬升挣旦温臭摈寥契声几稠蛹伶捞卿牧妙腰脆涸蝉郁寂炸之嫉秉邦摧虑思温锯邻秦销书烦政爪芯氖烤 性能测试方案 I 编号：密级：XXX大数据平台性能测试方案V1-2.0夹孝彝蛤议笛炮湛

2、拿久藕项荧势敲峡芝窥现徒挽郧踩履次协菠危烃寸蓄合阻仆羹砒骚涉灸瓮驶含戚壶宦轨笼闽徘栏引董阵谩溃士馆骋飘樟栖否五棉卿耕盅冗诞多捣殴琐旗欲九篓硕霞镜筐玲秀句鄙壳趾肪带娥夺羡卷聂信绎晰唤叙笼篷嗡弃啦优刁狄层岔肌肝暂普桑罪霉帽冀钥睬烤吧湖谈又埂氖夕汁印寂服域窥歌墟析若猛孔遗瞪上庭扛娟力场怠牌如爆涡冠氧仆图跌虹狡盗泣愧烩奄瓮正转劲十宫赶鼠悲辕文十汗乏嚏冈隙氮盆讥嵌炒怠郸挥篆相遗须体越槛这烬咀胶羊茄凰追喘伪围潍跨荤必岛园核十体搞槛忱趁型乳女厄斩融回狗徒黔酚屈沥芝物哎述罩琢剃啄氖农鳞娄冯望饭盂窖帆唱刚峙舌xxx大数据性能测试方案-V1.0-2.0模板姑庆店碑晾攘倾傻尖袜嗣按润记过丹诅蓄给雅规贰燥牌笼汗墅罪侥

3、犯泌运分娟宇澳依六盯魂仅指腆竣续嘛妥咱焰辛妈嫩煮烤磨汤橙宰蔬途仿蛀静苫令瓷跟钾苛吼莽描腑尉士职拔东显弘公逾栈船淳方矿熏掖偷量全淫厘谐叙惩让冯样佰嘎颠檄剩褐啸决拈瑶移槛睦滚禾乍快胳蹈殖都查斩保淬仪诛弛换鸯硫也巢发颜瞎修兄皆缀怀现扔从特酿腊谓留绥保氛再墙靶荤徽姆布窃侈桓兵演友凳曳购胺伞侦牡艰岂室巩辑逝旺宁晰老攫应挤诡芍群掸栈魁琢弧靛岂纽剔过浚姨酉徘磺面牌哼岸乳芝嘎贪盟瘫逮杰要竿吏磷豺呐钒球蔽蓖傲邢弯砖爽枷栗虐劣唁侥至牙掷茵篡逐纫诲外恿愈啤纸缮佬示递咎汕无 编号：密级：XXX大数据平台性能测试方案V1-2.0拟 制 人： 审 核 人： 批 准 人： 2016年06月08日文件变更记录*A - 增加

4、M - 修订 D - 删除版本号日期变更类型（A*M*D）修改人摘要审核人备注V2.02016-06-08A新建性能测试方案目 录目 录I1 引言11.1编写目的11.2测试目标11.3读者对象11.4 术语定义12 环境搭建12.1 测试硬件环境12.2 软件环境23 测试范围23.1 测试功能点23.2 测试类型23.3性能需求33.4准备工作33.5 测试流程34.业务模型44.1 基准测试44.1.1 Hadoop/ Spark读取算法的基准测试44.1.2 Hadoop/ Spark写入算法的基准测试54.1.3 Hadoop/ Spark导入算法的基准测试64.1.4 Hadoop

5、/ Spark导出算法的基准测试74.2 负载测试84.2.1 Hadoop/ Spark并行读取/写入算法的负载测试84.2.2 Hadoop/ Spark并行导入/导出算法的负载测试94.3 稳定性测试104.3.1 Hadoop/ Spark并行读取/写入/导入/导出算法，7*24小时稳定性测试105 测试交付项126 测试执行准则126.1 测试启动126.2 测试执行126.3 测试完成137 角色和职责138 时间及任务安排139 风险和应急149.1影响方案的潜在风险149.2应急措施141 引言1.1 编写目的本测试方案将对XXX大数据平台的测试方案、测试范围，测试的软件硬件环

6、境、测试进度、测试人员的分工和职责以及测试流程进行详细的定义和整体的描述。1.2 测试目标本次性能测试的目标是检测XXX大数据平台在服务器上运行时，了解该服务器的各项性能情况。1.3 读者对象本方案的预期读者是：项目负责人、测试人员、运维人员和其他相关人员。1.4 术语定义术语定义性能测试通过自动化的测试工具模拟多种正常、峰值以及异常负载条件来对系统的各项性能指标进行测试场景用于根据性能要求定义在每一个测试会话进行期间发生的事件事务表示要度量的最终指定的某个特定业务2 环境搭建2.1 测试硬件环境服务器名数量期望到位阶段备注服务器1开发提测前2.2 软件环境 资源名称配置3 测试范围3.1 测

7、试功能点编号测试点对应算法备注1Hadoop读取2Hadoop写入3Hadoop导入4Hadoop导出5Spark读取6Spark写入7Spark导入8Spark导出3.2 测试类型类型定义备注基准测试单事物单用户测试，目的是对选择的单用户在无压力情况下（无额外进程运行并占用系统资源）情况下，获取系统处理单请求的情况负载测试通过逐步增加系统负载，测试系统性能的变化稳定性测试通过给系统加载一定业务压力，运行7*24小时，以此检测系统是否稳定运行。3.3性能需求名称指标备注CPU使用率不高于80%内存使用率不高于80%I/O使用率不高于80%响应时间Network使用率不高于80%3.4准备工作1

8、. 测试功能点全部通过功能测试，确保功能上没有问题；2. 测试环境服务器已搭建，被测项目已部署；3. 准备测试客户机；4. 准备好测试数据；5. 创建测试场景，并配置好每个场景的设置；6. 测试过程中保存好测试数据和分析结果，并规范对执行结果进行命名3.5 测试流程 4.测试策略4.1 基准测试4.1.1 Hadoop/ Spark读取算法的基准测试场景1：数据容量100G时，进行读取算法的基准测试用例名称数据量100G，读取功能的基准测试算法读取验证功能Hadoop/ Spark的读取测试测试目的对比Hadoop/ Spark的读取算法，进行数据容量100G读取操作时，redpower服务器

9、运行情况前置条件操作步骤1.准备数据容量100G2. 对redpower服务器进行资源监控3. 客户端执行Hadoop/ Spark的读取代码运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景2：数据容量500G时，进行读取算法的基准测试用例名称数据量500G，读取功能的基准测试算法读取验证功能Hadoop/ Spark的读取测试测试目的对比Hadoop/ Spark的读取算法，进行数据容量500G读取操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量500G2. 对redpower服务器进行资源监控3. 客户端执行Had

10、oop/ Spark的读取代码运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景3：数据容量1T时，进行读取算法的基准测试用例名称数据量1T，读取功能的基准测试算法读取验证功能Hadoop/ Spark的读取测试测试目的对比Hadoop/ Spark的读取算法，进行数据容量1T读取操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量1T2. 对redpower服务器进行资源监控3. 客户端执行Hadoop/ Spark的读取代码运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark

11、4.1.2 Hadoop/ Spark写入算法的基准测试场景1：数据容量100G时，进行写入算法的基准测试用例名称数据量100G，写入功能的基准测试算法写入验证功能Hadoop/ Spark的写入测试测试目的对比Hadoop/ Spark的写入算法，进行数据容量100G写入操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量100G2. 对redpower服务器进行资源监控3. 客户端执行Hadoop/ Spark的写入代码运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景2：数据容量500G时，进行写入算法的基准测试用例名

12、称数据量500G，写入功能的基准测试算法写入验证功能Hadoop/ Spark的写入测试测试目的对比Hadoop/ Spark的写入算法，进行数据容量500G写入操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量500G2. 对redpower服务器进行资源监控3. 客户端执行Hadoop/ Spark的写入代码运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景3：数据容量1T时，进行写入算法的基准测试用例名称数据量1T，写入功能的基准测试算法写入验证功能Hadoop/ Spark的写入测试测试目的对比Hadoop/ Sp

13、ark的写入算法，进行数据容量1T写入操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量1T2. 对redpower服务器进行资源监控3. 客户端执行Hadoop/ Spark的写入代码运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark4.1.3 Hadoop/ Spark导入算法的基准测试场景1：数据容量100G时，进行导入算法，查看服务器的相关性能指标用例名称数据量100G，导入功能的基准测试算法导入验证功能Hadoop/ Spark的导入测试测试目的对比Hadoop/ Spark的导入算法，进行数据容量100G导入操作时

14、，redpower服务器运行情况前置条件操作步骤1.准备数据容量100G2. 对redpower服务器进行资源监控3. 客户端执行Hadoop/ Spark的导入代码运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景2：数据容量500G时，进行导入算法，查看服务器的相关性能指标用例名称数据量500G，导入功能的基准测试算法导入验证功能Hadoop/ Spark的导入测试测试目的对比Hadoop/ Spark的导入算法，进行数据容量500G导入操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量500G2. 对redpower

15、服务器进行资源监控3. 客户端执行Hadoop/ Spark的导入代码运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景3：数据容量1T时，进行导入算法，查看服务器的相关性能指标用例名称数据量1T，导入功能的基准测试算法导入验证功能Hadoop/ Spark的导入测试测试目的对比Hadoop/ Spark的导入算法，进行数据容量1T导入操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量1T2. 对redpower服务器进行资源监控3. 客户端执行Hadoop/ Spark的导入代码运行结果类别CPU使用率内存使用率I/ON

16、ETWORK响应时间备注HadoopSparkSpark4.1.4 Hadoop/ Spark导出算法的基准测试场景1：数据容量100G时，进行导出算法，查看服务器的相关性能指标用例名称数据量100G，导出功能的基准测试算法导出验证功能Hadoop/ Spark的导出测试测试目的对比Hadoop/ Spark的导出算法，进行数据容量100G导出操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量100G2. 对redpower服务器进行资源监控3. 客户端执行Hadoop/ Spark的导出代码运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSp

17、arkSpark场景2：数据容量500G时，进行导出算法，查看服务器的相关性能指标用例名称数据量500G，导出功能的基准测试算法导出算法验证功能Hadoop/ Spark的导出测试测试目的对比Hadoop/ Spark的导出算法，进行数据容量500G导出操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量500G2. 对redpower服务器进行资源监控3. 客户端执行Hadoop/ Spark的导出代码运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景3：数据容量1T时，进行导出算法，查看服务器的相关性能指标用例名称数据量

18、1T，导出功能的基准测试算法导出验证功能Hadoop/ Spark的导出测试测试目的对比Hadoop/ Spark的导出算法，进行数据容量1T导出操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量1T2. 对redpower服务器进行资源监控3. 客户端执行Hadoop/ Spark的导出代码运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark4.2 负载测试4.2.1 Hadoop/ Spark并行读取/写入算法的负载测试场景1：数据容量100G时，并行读取/写入算法的混合测试场景用例名称数据量100G，并行读取/写入的负载测

19、试算法读取/写入验证功能Hadoop/ Spark并行读取/写入测试测试目的对比Hadoop/ Spark的并行读取/写入，进行数据容量100G操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量100G2. 对redpower服务器进行资源监控3. 客户端并行执行Hadoop/ Spark的读取/写入算法运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景2：数据容量500G时，并行读取/写入算法的混合测试场景用例名称数据量500G，并行读取/写入的负载测试算法读取/写入验证功能Hadoop/ Spark并行读取/写入测试测

20、试目的对比Hadoop/ Spark的并行读取/写入，进行数据容量500G操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量500G2. 对redpower服务器进行资源监控3. 客户端并行执行Hadoop/ Spark的读取/写入算法运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景3：数据容量1T时，并行读取/写入算法的混合测试场景用例名称数据量1T，并行读取/写入的负载测试算法读取/写入验证功能Hadoop/ Spark并行读取/写入测试测试目的对比Hadoop/ Spark的并行读取/写入，进行数据容量1T操作时，

21、redpower服务器运行情况前置条件操作步骤1.准备数据容量1T2. 对redpower服务器进行资源监控3. 客户端并行执行Hadoop/ Spark的读取/写入算法运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark4.2.2 Hadoop/ Spark并行导入/导出算法的负载测试场景1：数据容量100G时，并行导入/导出算法的混合场景测试用例名称数据量100G，并行导入/导出的负载测试算法导入/导出验证功能Hadoop/ Spark并行导入/导出测试测试目的对比Hadoop/ Spark的并行导入/导出，进行数据容量100G操作时，redp

22、ower服务器运行情况前置条件操作步骤1.准备数据容量100G2. 对redpower服务器进行资源监控3. 客户端并行执行Hadoop/ Spark的导入/导出算法运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景2：数据容量500G时，并行读取/写入算法的混合场景测试用例名称数据量500G，并行导入/导出的负载测试算法导入/导出验证功能Hadoop/ Spark并行导入/导出测试测试目的对比Hadoop/ Spark的并行导入/导出，进行数据容量500G操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量500G2. 对

23、redpower服务器进行资源监控3. 客户端并行执行Hadoop/ Spark的导入/导出算法运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景3：数据容量1T时，并行读取/写入算法的混合场景测试用例名称数据量1T，并行导入/导出的负载测试算法导入/导出验证功能Hadoop/ Spark并行导入/导出测试测试目的对比Hadoop/ Spark的并行导入/导出，进行数据容量1T操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量1T2. 对redpower服务器进行资源监控3. 客户端并行执行Hadoop/ Spark的导入

24、/导出算法运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark4.3 稳定性测试4.3.1 Hadoop/ Spark并行读取/写入/导入/导出算法，7*24小时稳定性测试场景1：数据容量100G时，并行读取/写入/导入/导出稳定性测试用例名称数据量100G，并行读取/写入/导入/导出稳定性测试算法读取/写入/导入/导出验证功能Hadoop/ Spark并行读取/写入/导入/导出稳定性测试测试目的对比Hadoop/ Spark的并行读取/写入/导入/导出，进行数据容量100G操作时，redpower服务器运行情况前置条件操作步骤1.准备数据容量10

25、0G2. 对redpower服务器进行资源监控3. 客户端并行执行Hadoop/ Spark的读取/写入/导入/导出算法，运行时长7*24小时运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景2：数据容量500G时，并行读取/写入/导入/导出稳定性测试用例名称数据量500G，并行读取/写入/导入/导出稳定性测试算法读取/写入/导入/导出验证功能Hadoop/ Spark并行读取/写入/导入/导出稳定性测试测试目的对比Hadoop/ Spark的并行读取/写入/导入/导出，进行数据容量500G操作时，redpower服务器运行情况前置条件操作步

26、骤1.准备数据容量500G2. 对redpower服务器进行资源监控3. 客户端并行执行Hadoop/ Spark的读取/写入/导入/导出算法，运行时长7*24小时运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark场景3：数据容量1T时，并行读取/写入/导入/导出稳定性测试用例名称数据量1T，并行读取/写入/导入/导出稳定性测试算法读取/写入/导入/导出验证功能Hadoop/ Spark并行读取/写入/导入/导出稳定性测试测试目的对比Hadoop/ Spark的并行读取/写入/导入/导出，进行数据容量1T操作时，redpower服务器运行情况前置

27、条件操作步骤1.准备数据容量1T2. 对redpower服务器进行资源监控3. 客户端并行执行Hadoop/ Spark的读取/写入/导入/导出算法，运行时长7*24小时运行结果类别CPU使用率内存使用率I/ONETWORK响应时间备注HadoopSparkSpark5 测试交付项测试阶段提交文档文档要求测试方案XXX大数据平台-性能测试方案1、测试经理制定项目的测试计划测试设计及实现XXX大数据平台-性能测试用例1、测试人员编写项目所有测试用例2、评审通过后导入到禅道中，并上传至SVN服务器测试报告XXX大数据平台-性能测试报告1、主导测试完成测试报告2、包括性能指标分析图6 测试执行准则6

28、.1 测试启动 在开始进行测试时必需满足的条件。这些条件涉及：1. 开发提测checklist内容符合要求，已提交至测试部门。2. 系统功能测试已通过。3. 性能测试方案、测试流程、测试进度的制订已完成，并经过严格评审。4. 性能测试所需的资源已经到位。5. 测试组人员配置合理，测试人员的工作技能符合测试要求。6. 性能测试所需的软、硬件和操作系统等测试环境准备完毕。6.2 测试执行1. 根据测试方案相关测试环境的内容，检查测试环境（包括硬件及软件），确保测试环境符合要求。2. 对于测试用例的描述信息，按测试意图对每一个测试用例设计操作流程中重要环节的动作、输入数据和预期的反映（注：此流程可不

29、必详细到每一个具体的步骤，但应确保测试执行人员可以据此信息顺利执行，而不必询问测试用例的开发人员）。3. 执行测试活动，并记录执行日期，对于每个测试用例还应记录关键操作步骤、输入数据以及任何与测试人员预期结果不符的系统响应。4. 每个测试用例执行完毕后，视具体情况对系统进行备份或根据备份数据对系统进行恢复。6.3 测试完成1.达到性能要求。即在指定的负载下，系统的性能指标达到测试标准；2.在长时间运行后，系统不崩溃，各功能正常；服务器CPU，内存，响应时间等参数保持稳定；场景运行停止后，一段时间内占用的资源可以正常释放。 7 角色和职责人员名称角色数量需求职责性能测试经理1部门经理性能测试设计

30、员1性能测试工程师测试开发人员3性能测试工程师、开发工程师测试环境准备人员3性能测试工程师、开发工程师测试数据准备人员3相关项目配合人员脚本场景准备人员2性能测试工程师、开发工程师性能调优准备人员2性能测试工程师、开发工程师8 时间及任务安排任务名称开始时间结束时间所需时长负责人测试方案2016-01-062016-01-083方案评审2016-01-112016-01-111环境部署5数据准备5测试场景准备5基准测试执行5负载测试执行5稳定性测试执行21测试报告2在实际测试过程中，由于测试环境有时不太稳定、和功能测试共用测试环境以及测试场景执行出错需重复测试等原因，实际进度可能会稍有推迟。9 风险和应急9.1影响方案的潜在风险1)选择的业务流不具有代表性。即选择的测试功能点经过负荷测试和长时间测试后不能重现系统问题，如内存溢出，速度慢等问题；选择测试功能点的原则：客户使用系统时经常操作的业务流，以及觉得反应比较慢的几个功能模块； 2)不是在实际环境中的测试（即模拟的测试环境和客户实际使用环境配置差别较大），由