Android常规性能指标定义及标准-v0.1

B
B
B
B
B
B
B
B
B
A
A
高端：均值<=1.5S 中端：均值<=1.5S 低端：均值<=2.0S 高端：均值<=1.5S 中端：均值<=1.5S 低端：均值<=2.0S 高端：均值<=2.5S 中端：均值<=2.5S 低端：均值<=3.0S 高端：均值<=4S 中端：均值<=4S 低端：均值<=4.5S 高端：峰值<=40% 中端：峰值<=45% 低端：峰值<=55% 高端：均值<=15% 中端：均值<=20% 低端：均值<=30% 高端：峰值<=45% 中端：峰值<=50% 低端：峰值<=60% 高端：均值<=15% 中端：均值<=20% 低端：均值<=35%
高端：1.5S<均值<=3.5S 中端：1.5S<均值<=4S 低端：2.0S<均值<=4.5S 高端：1.5S<均值<=3.5S 中端：1.5S<均值<=4S 低端：2.0S<均值<=4.5S 高端：2.5S<均值<=4.5S 中端：2.5S<均值<=5S 低端：3.0S<均值<=5.5S 高端：4S<均值<=6S 中端：4S<均值<=6.5S 低端：4.5S<均值<=5.5S 高端：40%<峰值<=55% 中端：45%<峰值<=60% 低端：55%<峰值<=75% 高端：15%<均值<=25% 中端：20%<均值<=30% 低端：30%<均值<=45% 高端：45%<峰值<=60% 中端：55%<峰值<=65% 低端：60%<峰值<=80% 高端：15%<均值<=25% 中端：20%<均值<=30% 低端：35%<均值<=45%
LIMIT/2<峰值<=1.5*LIMIT 2*LIMIT/3<峰值<=2*LIMIT 1.2*LIMIT<峰值<=2.5*LIMIT 150KB<X<=300KB 300KB<X<=600KB 300KB<X<=1200KB 600KB<X<=1500KB
1.5*LIMIT<峰值 2*LIMIT<峰值 2.5*LIMIT<峰值 300KB<X 600KB<X 1200KB<X 1500KB<X
启动时间
冷启动时间（开机后第一次启动）
热启动时间（开机后非第一次启动）
WI-FI
响应时间
典型业务场景响应时间（从操作开始到完成 4G 响应的时间）
3G
2G
典型业务场景CPU占用峰值 WI-FI 典型业务场景CPU占用均值 CPU占用 典型业务场景CPU占用峰值 非WIFI或无网络交互 典型业务场景CPU占用均值 使用iTest监控，CPU算 法选择默认的采样法， 均值为整个业务场景的 均值
测试点 安装包尺寸 ROM占用
测试指标定义 原始APK安装包大小 首次安装后ROM占用空间 无
其他条件
测试方法 查看新版本apk大小 查看系统设置应用程序 中的大小
重新安装应用或清除数据 不存在网络交互情况 重新安装应用或清除数据 首次启动时间（新安装，点击图标到主界面 存在网络交互情况 加载完成） WIFI/4G 重新安装应用或清除数据 存在网络交互情况 2G/3G 安装后使用，重启手机 不存在网络交互情况 安装后使用，重启手机 存在网络交互情况 WIFI/4G 安装后使用，重启手机 存在网络交互情况 2G/3G 安装后使用，重启手机 不存在网络交互情况 安装后使用，重启手机 存在网络交互情况 WIFI/4G 安装后使用，重启手机 存在网络交互情况 2G/3G 不存在网络交互 时间类测试方法
手机选取标准：从主测机型中选择配置高、中、低，预装软件符合用户手机现状、运行状况良好的手机，可根据条件仅选取一 安装应用：不低于30（高）／20（中）／15（低）个常用应用 后台运行应用：不低于5个，手机QQ、微信、输入法、手机助手、安全软件 高配标准：内存>=3G 或 主频>=1.5GHz，参考价格>=2000，如：华为P8，三星s6，三星note5，华为mate8，小米note等 中配标准：内存>=2G 或 主频>=1.2GHz，参考价格>=1200，如：小米4 低配标准：内存<2G 或 主频<1.2GHz，参考价格<1200，如：小米2a 时间类测试方法：默认使用掐秒表方法测试，低于1.5S可使用手机拍视频＋视频分析方法测试；一般测试5次，可根据情况调
非WIFI
流量
WIFI
使用iTest监控流量消 耗，关注业务操作前后 的差值，此处流量为上 传及下载流量之和
机，可根据条件仅选取一种、两种，如配置中上
，华为mate8，小米note等
测试5次，可根据情况调整测试次数
优先级 B C
参考验收指标 较好 比竞品小5M以上 <=20M <=30.00M 高端：均值<=4.5S 中端：均值<=5S 低端：均值<=5.5S 高端：均值<=4.5S 中端：均值<=5S 低端：均值<=5.5S 高端：均值<=5.5S 中端：均值<=6S 低端：均值<=6.5S 高端：均值<=4.5S 中端：均值<=5S 低端：均值<=5.5S 高端：均值<=4.5S 中端：均值<=5S 低端：均值<=5.5S 高端：均值<=5.5S 中端：均值<=6S 低端：均值<=6.5S 高端：均值<=2.5S 中端：均值<=3S 低端：均值<=3.5S 高端：均值<=2.5S 中端：均值<=3S 低端：均值<=3.5S 高端：均值<=3.5S 中端：均值<=4S 低端：均值<=4.5S 高端：均值<=1.5S 中端：均值<=1.5S 低端：均值<=2.0S 一般 和竞品持平 20M<X<=30M 30M<X<=40M 高端：4.5S<均值<=7.5S 中端：5S<均值<=8S 低端：5.5S<均值<=8.5S 高端：4.5S<均值<=7.5S 中端：5S<均值<=8S 低端：5.5S<均值<=8.5S 高端：5.5S<均值<=8S 中端：6S<均值<=9S 低端：6.5<均值<=9.5S 高端：4.5S<均值<=7.5S 中端：5S<均值<=8S 低端：5.5S<均值<=8.5S 高端：4.5S<均值<=7.5S 中端：5S<均值<=8S 低端：5.5S<均值<=8.5S 高端：5.5S<均值<=8S 中端：6S<均值<=9S 低端：6.5<均值<=9.5S 高端：2.5S<均值<=4.5S 中端：3S<均值<=5S 低端：3.5<均值<=5.5S 高端：2.5S<均值<=4.5S 中端：3S<均值<=5S 低端：3.5<均值<=5.5S 高端：3.5S<均值<=5S 中端：4S<均值<=5.5S 低端：4.5<均值<=6S 高端：1.5S<均值<=3.5S 中端：1.5S<均值<=4S 低端：2.0S<均值<=4.5S 较差 比竞品大5M以上 30M<X 40M<X 高端：7.5S<=均值 中端：8S<=均值 低端：8.5S<=均值 高端：7.5S<=均值 中端：8S<=均值 低端：8.5S<=均值 高端：8S<=均值 中端：9S<=均值 低端：9.5S<=均值 高端：7.5S<=均值 中端：8S<=均值 低端：8.5S<=均值 高端：7.5S<=均值 中端：8S<=均值 低端：8.5S<=均值 高端：8S<=均值 中端：9S<=均值 低端：9.5S<=均值 高端：4.5S<=均值 中端：5S<=均值 低端：5.5S<=均值 高端：4.5S<=均值 中端：5S<=均值 低端：5.5S<=均值 高端：5S<=均值 中端：5.5S<=均值 低端：6S<=均值 高端：3.5S<均值 中端：4S<均值 低端：4.5S<均值
使用iTest监控，使用 存在1个后台进程 多个后台进程时可酌情放 adb shell getprop dalvik.vm.heapgrowth 宽 limit获取堆内存上限， 假设此值为LIMIT adb shell getprop dalvik.vm.heapstartsiz 非首次启动 e为START
ຫໍສະໝຸດ Baidu
高端：3.5S<均值 中端：4S<均值 低端：4.5S<均值 高端：3.5S<均值 中端：4S<均值 低端：4.5S<均值 高端：4.5S<均值 中端：5S<均值 低端：5.5S<均值 高端：6S<均值 中端：6.5S<均值 低端：5.5S<均值 高端：55%<峰值 中端：60%<峰值 低端：75%<峰值 高端：25%<均值 中端：30%<均值 低端：45%<均值 高端：60%<峰值 中端：65%<峰值 低端：85%<峰值 高端：25%<均值 中端：30%<均值 低端：45%<均值
XX项目XX版本
其他说明
启动过程中适当加入中间页，能 缩短用户等待感知时间。
开始操作到结果完全展示的时间 。
不发生OOM
尤其需要关注H5页面包更新，只 能在WIFI环境中
PSS内存值（软件退出，持续半小时） 内存使用
PSS内存值（软件启动） PSS内存值（典型业务场景） PSS内存值（多图片、大内存典型场景） 流量消耗（典型业务场景一个页面或一次完 整业务操作） 流量消耗（多图片、大流量典型场景下的一 个页面） 流量消耗（典型业务场景一个页面或一次完 整业务操作） 流量消耗（多图片、大流量典型场景下的一 个页面）
A
A
A
B
A
B
A
A
均值<=min(2*START,LIMIT/3)
min(2*START,LIMIT/3)<均值 <=min(4*START,LIMIT/2)
min(4*START,LIMIT /2)<均值
A A A A A A A
峰值<=LIMIT/2 峰值<=2*LIMIT／3 峰值<=1.2*LIMIT X<=150KB X<=300KB X<=300KB X<=600KB