报告解读

测试报告解读

顶部区域是本次测试结果的描述，包含了测试应用的相关信息，以及测试类型、创建人、创建时间、运行时长（所有设备的执行时长总和）、测试状态、通过率。

功能	说明
概述	从整体上呈现当次测试的结果：任务执行状态，检测发现的TOP问题，以及各个设备的测试结果从整体上呈现当次测试的结果：任务执行状态、通过率，检测发现的TOP问题，以及各个设备的测试结果
设备详情	从测试设备的维度呈现单台设备的执行结果
崩溃列表	展示本次测试所有的崩溃问题聚合分析汇总
性能报告	展示本次测试收集到的所有性能数据，包括安装、启动、CPU、内存、网络、FPS等
设备分布	按品牌、版本等多个维度聚合分析本次测试的设备覆盖情况

概述

是本次测试结果的汇总，包含执行结果、通过率结果，以及异常检测结果。内容主要包含以下部分：

• 执行概况、通过率、问题分类：统计执行本次兼容性测试的所有设备运行情况、运行通过率情况及详细的错误类型。
  
• 性能概况：收集测试过程中的所有性能数据汇总
  
• 崩溃列表：展示本次测试出现的崩溃问题，并进行归类汇总
  
• 设备测试概况：展示执行本次兼容性测试的所有设备运行情况

崩溃列表

对本次测试的所有异常问题进行聚合汇总，您可以通过异常问题列表快速了解到有哪些top问题，关联哪些设备等。

设备详情

切换到【设备详情】页，或者点击【概述页】的具体设备，可以进入设备详情页中查看到所有设备的执行结果。结果数据包括以下部分：

• 设备的详细信息
  
• 过程执行时长
  
• 执行结果：执行结果主要是表示这台设备在执行过程中是否有异常，与应用本身是否有异常无关
  
• 测试结果：应用执行稳定性测试的结果，假如有异常会显示异常数量及列表
  
• 过程截图：查看设备运行过程中的屏幕截图
  
• 性能概况：计算该设备在运行过程中的性能情况，汇总取平均值
  
• 性能曲线：展示该设备在运行过程中的所有性能情况，得到性能曲线图
  

性能报告

对测试过程中的全部设备的性能数据做汇总分析，呈现各项测试项的中位值、最大值及最小值。

测试项主要有以下类别：

• 安装时长：从发起安装请求到完成安装的时间
• 启动时间：从发起Intent启动请求到完成启动的时间
• CPU占用：应用运行期间的平均CPU
• 内存占用：应用运行期间的平均内存
• 流量占用：应用运行期间的平均流量
• FPS：应用运行期间的平均帧率情况

设备分布

• 根据不同维度对测试设备进行聚合汇总，让您快速了解到本次测试覆盖的设备情况。维度包含了操作系统、品牌、CPU、分辨率、CPU核数、内存
• 您也可以对执行状态进行筛选分类，进一步了解执行成功和执行失败的设备分布情况

兼容性测试Demo

访问 https://yanshu.effirst.com/standard_compatibility/demo 可以查看Demo