性能测试（压测流程、方案、评审、脚本执行、分析 告）规范

一、性能测试流程：

1、压测申请

注意点：

• 申请提出时间：至少在期望压测时间前3天提出压测申请。
• 期望压测执行人：经过性能测试培训并通过考试的测试人员。
• 压测环境：选择“生产环境”，则走按生产环境压测规范来进行后续流程；选择其他环境，则以非生产环境压测规范来进行后续流程。
• 生产压测必要条件：生产压测选择生产压测必要条件，具体”生产压测必要条件“章节
• 其他参考性能指标：可以是默认的几项，也可是其他自定义项。
• 环境机型：填写被测环境应用机型，非生产环境压测，填写生产环境及被测环境机型。生产环境压测可只填写生产环境机型。此处可通过“环境机型查询”，通过输入“应用ID”，来查找机型结果，找到匹配的内容，选择后即可自动填入环境机型栏。

2、压测方案

注意点：

• 编写人：压测方案由压测执行人编写。
• 环境配比结论：通过“性能测试关键指标估算方法”，得出生产与测试环境配比。
• 待测项及预期性能指标：填写被测环境配比后的期望结果。
• 测试用例：测试目的大致可分3种，1、是否达到期望指标；2、找到最佳性能点；3、找到性能拐点。
• 测试场景，请描述清楚与所选压测类型匹配的测试场景。
  • 负载测试：测试场景并发数由低到高等比递增，达到或超越期望结果。
  • 稳定性测试：测试场景并发数按性能拐点80%的并发量持续运行12小时以上。

3、方案评审

注意点：

• 生产环境评审
  • 组织人：压测执行人 
  • 参与方：被测应用产品负责人、开发架构师及下游相关方开发架构师、运维负责人、监控组、技术平台相关负责人、专职性能测试，压测执行人与评审专职性能测试不可为同一人）或测试架构师（可选）
  • 评审结果：参与方都需要签字确认，确保方案无误。
• 非生产环境评审
  • 组织人：压测执行人
  • 参与方：被测应用产品负责人、开发架构师，下游相关方开发架构师（可选）、专职性能测试（压测执行人与评审专职性能测试不可为同一人）或测试架构师（可选）

4、测试脚本开发

（略）

5、测试执行

注意点：

• 生产压测
  • 事前：提前一天在钉钉-故障处理保障群发通知告知压测协助方，周知其他各方，内容包括：压测内容、预定开始、结束时间、预估影响范围。
  • 事中：钉钉-故障处理保障群，通知开始压测。压测期间触发“异常中止标准”，则立即停止压测，在故障处理保障群通 异常，并协助恢复。
  • 事后：钉钉-故障处理保障群，通知结束压测或者中止压测。
• 非生产压测
  • 事前：提前一天在钉钉-质量改进部群发通知周知各方，内容包括：压测内容、预定开始、结束时间、预估影响范围。
  • 事中：钉钉-部门群，通知开始压测。
  • 事后：钉钉-部门群，通知结束压测。

6、结果分析

注意点：

• 测试的通过/不通过的标准：
  • 压测中任一性能指标不符合预期结果，则压测失败，并中止。
• 准出标准：无P0P1P2 Bug。

7、压测 告

注意点：

• 环境配比结论：实际压测时，生产与测试环境配比。
• 测试目标：实际被测环境配比后的期望结果。
• 测试结果：实际待测项是否测试结果。
• 与 告一同提交的图形 表，用于佐证实际压测结果真实可靠
  • 时间/tps变化图
  • 时间/cpu变化图（或其他资源消耗图，按需提供）
  • 时间/并发数变化图

8、 告评审

注意点：

• 评审人：专职性能测试人员（压测执行人与专职性能测试人员相同的，则由测试架构师评审）
• 评审结果：不通过则重测。

9、必压测接口判定

满足某些条件则为必压测接口

近一周工作日内接口峰值tps>=500

二、性能测试关键指标估算方法

三、性能测试checklist

四、性能测试Bug级别定义

五、预期性能参数

六、生产压测异常中止标准

七、生产压测必要条件