系统上线标准
合集下载
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
修改优先级为高,该级别需要程序员尽快修复(高度重视,P3)
操作界面错误,如:数据窗口内列明定义、含义是否一致)
边界条件下错误
功能存在错误,但出现概率很低
提示信息错误(包括未给出信息、信息提示错误等)
长时间操作无进度提示,系统为优化(性能问题)
Minor
微小的问题,对功能几乎没有影响,产品及属性仍可使用。
系统上线标准
一、编写目的
明确测试工作的开始和结束标准。
二、软件测试合格标准
P0级错误
P1级错误
P2级错误
P3级错误
P4级错误
P5级错误
无
无
≦2%
≦8%
≦40%
可不进行修复
以上比例为错误占总测试模块的比例。
三、缺陷修复率标准
1)P0、P1级错误修复率应达到100%
2)P2级错误修复率应达到98%以上
3)P3级错误修复率应达到92%以上
八、
服务器运行状况响应指标(需建立预警机制):
1.CPU%并发期间最大使用率应不超过70~80%,如有集合并发可能允许短暂接近或达到100%,但大部分不应超过95%
2.Memery测试期间保证内存充足可用内存不少于20%
3.Disk监控硬盘是否有读写不超过40%
性能指标:(需要业务部门提供需求指标)
online环境(生产环境,测试人员进行线上验证,确认上线的功能是否ok)
七、
1.需求分析说明文档中定义的所有功能全部实现,性能指标全部达到要求
2.在验收测试中发现的错误已经得到修复,各级缺陷修复率达到标准
3.所有测试项中没有残余P0、P1级别的错误
4.需求分析文档、设计文档和编码显示一致
5.验收测试工作齐全(测试计划,测试用例,测试日志,测试通知单,测试报告,待验收的系统程序)
4)P4级错误修复率应达到60%以上
5)P5级错误无需在本版本完成修复
注:项目紧急时,P3级别错误修复率达到60%以上;P4级别错误率达到20%即可
四、覆盖率标准
测试需求执行覆盖率应达到100%(业务测试用例均以执行)。
五、错误级别
分级
等级
等级说明
分类明
致命问题
Blocker
导致整个产品无法进行测试。
Online环境,进行快速回归,验证上线的需求是否正常,通过后发布上线结果
修改优先级为低,该级别需要程序员修改或不修改(正常处理,P4)
界面格式等不规范
操作时未给用户提示
文字排列不整齐等一些小问题
光标跳转设置不好,光标定位错误
轻微问题
Trivial
提示信息格式不符合要求,违背正常习俗习惯的,界面不美观,控件排列,格式不统一(正常处理,P4)
辅助说明描述不清楚
个别不影响产品理解的错别字
1.响应时间(不同业务/场景的并发响应时间)
2.系统支持的用户量
3.吞吐量
4.事务的成功率
九、各环境提交标准
Dev环境–>QA环境,开发人员进行自测(如冒烟测试),有业务需求的进行内部联调,通过后提交QA环境
QA环境–>Pre环境,达到“缺陷修复率标准”的标准,通过后提交Pre环境
Pre环境–> Online环境,达到“缺陷修复率标准”的标准,通过后提交Online环境
修改优先级为最高,该级别需要程序员立即修复(马上解决,P0)
模块无法启动或异常退出
其他导致无法测试的错误
Critical
死机,数据丢失,主要功能完全丧失,系统悬挂等错误。
修改优先级为最高,该级别需程序员立即修复(马上解决,P1)
运行过程中系统崩溃、死机、重启
功能设计与需求严重不符
严重花屏、严重的数值计算错误、内存泄漏
影响手机语音或数据通讯等功能
严重问题
Major
主要功能上市,导致严重的问题,或致命的错误声明。
修改优先级高,该级别需要程序员尽快修复(急需解决,P2)
功能未能实现或存在错误
轻微的数值计算错误
系统所提供的功能或服务受明显的影响
用户数据丢失或破坏
一般问题
Normal
次要功能丧失,导致严重的问题,或致命的错误声明。
可输入区域和只读区域没有明显区分标志
Enhancement
功能性建议,功能性使用,方便性,易用性不够(优先级低,P5)
建议(公司内部人员反馈、用户反馈/投诉)
六、测试环境
DEV环境(开发环境,供开发人员进行开发,联调,bug复现等)
QA环境(测试环境,测试人员测试需求,回归bug等)
Pre环境(预发布环境,使用线上数据库测试是否通过)
操作界面错误,如:数据窗口内列明定义、含义是否一致)
边界条件下错误
功能存在错误,但出现概率很低
提示信息错误(包括未给出信息、信息提示错误等)
长时间操作无进度提示,系统为优化(性能问题)
Minor
微小的问题,对功能几乎没有影响,产品及属性仍可使用。
系统上线标准
一、编写目的
明确测试工作的开始和结束标准。
二、软件测试合格标准
P0级错误
P1级错误
P2级错误
P3级错误
P4级错误
P5级错误
无
无
≦2%
≦8%
≦40%
可不进行修复
以上比例为错误占总测试模块的比例。
三、缺陷修复率标准
1)P0、P1级错误修复率应达到100%
2)P2级错误修复率应达到98%以上
3)P3级错误修复率应达到92%以上
八、
服务器运行状况响应指标(需建立预警机制):
1.CPU%并发期间最大使用率应不超过70~80%,如有集合并发可能允许短暂接近或达到100%,但大部分不应超过95%
2.Memery测试期间保证内存充足可用内存不少于20%
3.Disk监控硬盘是否有读写不超过40%
性能指标:(需要业务部门提供需求指标)
online环境(生产环境,测试人员进行线上验证,确认上线的功能是否ok)
七、
1.需求分析说明文档中定义的所有功能全部实现,性能指标全部达到要求
2.在验收测试中发现的错误已经得到修复,各级缺陷修复率达到标准
3.所有测试项中没有残余P0、P1级别的错误
4.需求分析文档、设计文档和编码显示一致
5.验收测试工作齐全(测试计划,测试用例,测试日志,测试通知单,测试报告,待验收的系统程序)
4)P4级错误修复率应达到60%以上
5)P5级错误无需在本版本完成修复
注:项目紧急时,P3级别错误修复率达到60%以上;P4级别错误率达到20%即可
四、覆盖率标准
测试需求执行覆盖率应达到100%(业务测试用例均以执行)。
五、错误级别
分级
等级
等级说明
分类明
致命问题
Blocker
导致整个产品无法进行测试。
Online环境,进行快速回归,验证上线的需求是否正常,通过后发布上线结果
修改优先级为低,该级别需要程序员修改或不修改(正常处理,P4)
界面格式等不规范
操作时未给用户提示
文字排列不整齐等一些小问题
光标跳转设置不好,光标定位错误
轻微问题
Trivial
提示信息格式不符合要求,违背正常习俗习惯的,界面不美观,控件排列,格式不统一(正常处理,P4)
辅助说明描述不清楚
个别不影响产品理解的错别字
1.响应时间(不同业务/场景的并发响应时间)
2.系统支持的用户量
3.吞吐量
4.事务的成功率
九、各环境提交标准
Dev环境–>QA环境,开发人员进行自测(如冒烟测试),有业务需求的进行内部联调,通过后提交QA环境
QA环境–>Pre环境,达到“缺陷修复率标准”的标准,通过后提交Pre环境
Pre环境–> Online环境,达到“缺陷修复率标准”的标准,通过后提交Online环境
修改优先级为最高,该级别需要程序员立即修复(马上解决,P0)
模块无法启动或异常退出
其他导致无法测试的错误
Critical
死机,数据丢失,主要功能完全丧失,系统悬挂等错误。
修改优先级为最高,该级别需程序员立即修复(马上解决,P1)
运行过程中系统崩溃、死机、重启
功能设计与需求严重不符
严重花屏、严重的数值计算错误、内存泄漏
影响手机语音或数据通讯等功能
严重问题
Major
主要功能上市,导致严重的问题,或致命的错误声明。
修改优先级高,该级别需要程序员尽快修复(急需解决,P2)
功能未能实现或存在错误
轻微的数值计算错误
系统所提供的功能或服务受明显的影响
用户数据丢失或破坏
一般问题
Normal
次要功能丧失,导致严重的问题,或致命的错误声明。
可输入区域和只读区域没有明显区分标志
Enhancement
功能性建议,功能性使用,方便性,易用性不够(优先级低,P5)
建议(公司内部人员反馈、用户反馈/投诉)
六、测试环境
DEV环境(开发环境,供开发人员进行开发,联调,bug复现等)
QA环境(测试环境,测试人员测试需求,回归bug等)
Pre环境(预发布环境,使用线上数据库测试是否通过)