zoukankan      html  css  js  c++  java
  • 一分钟读懂兼容测试报告(一):概况篇

    WeTest 导读

    WeTest深度兼容测试上线之后,为大量手游及应用挖掘了兼容问题,为测试开发同学提供了极大的便利。为了能够让测试开发同学能够迅速的了解测试后的结果,您是否真的读懂了WeTest的兼容报告?是否了解具体问题的准确定位?

     


     

     WeTest兼容测试报告总共分大块测试概况、问题列表、设备详情、性能报告和重测

    测试概况

    提交测试后,一般等待1-4小时后可在“我的报告”中查看测试报告,最看到的是测试概况。

     

    通过测试概况可以看到

    1. 测试通过率通过的机型数/测试的机型总数;描述的是应用在数百部机型上,通过机型数占比,是衡量应用质量最直接的指标。

    2. 覆盖用户数测试的每款机型对应的使用人数之和。WeTest根据各款机型的销量情况及第三方统计数据,得出每款机型对应的使用人群数量。

    3. 问题概述本次测试总共发现问题次数,问题概述会重点显示用户最需要关注的问题,一般是严重级别和致命级别的问题。

    4. 问题分布情况问题级别分为四类,根据问题对用户使用影响分为四类,影响从高到低分为四级,分别是致命严重一般提示(提示级别的问题,不会影响测试通过率)。

    5. 问题机型聚类:问题机型聚类这部分旨在帮助用户高效定位问题发生的规律和原因。报告将某一特定问题如UI异常、App Crash,按品牌系统分辨率三个维度进行聚类分析,帮助用户就某一特定问题进行机型锁定。

     

     

    Tips:底部可以添加附件和备注信息,主要用于用户上传/填写反馈意见,包括使用困难、产品功能预期等,以便于报告流转过程中,进行信息沟通,以不断优化WeTest产品。

     

    问题列表

    问题列表一栏提供本次测试中所有出现问题,用户可以根据需求,对问题进行级别和类别的筛选。

     

     

    右侧查看一栏可以跳转到相应设备的测试详情页面,包含本次测试设备的问题原因、问题现场、截图、日志信息性能数据

    问题原因观看到设备出现的问题概述。

     

     

    定位问题:可按时间轴点击直接跳转问题所在,结合下方操作过程截图实时日志信息,帮助用户更好定位问题。

     

     

    设备详情

    设备详情页可查看每台设备的测试情况,可通过不同维度的筛选功能,定位具体设备测试结果。

    点击“调试”可以跳转到云真机进行远程真机调试。

     

     

    查看设备详情页

    列表中点击设备详情页面,可以查看详细测试情况主要包括测试结果测试数据、数据和截图三大块

    测试结果可以查看测试出现的问题

     

     

    测试数据包括安装时间拉起时间、cpu占用、平均内存占用、流量消耗、平均FPS、测试耗时情况

     

     

    数据和截图

    可以查看每次操作的截图情况,浏览全部测试操作,方便用户更好定位问题。

     

     

    性能数据包括测试中实时CPU数据内存、流量FPS数据情况。

     

     

    日志信息

    可以查看本次设备测试的日志情况,更精准定位问题出现原因。

     

     

    性能报告

    性能报告由两部分内容组成,一是每款机型的性能数据,二是本次测试覆盖机型性能的区间分布及性能最差5款机型的情况。

    性能测试数据包括:安装耗时、启动耗时、CPU占用、内存占用流量消耗和FPS数据

     

     

    性能总览包括安装耗时分布、启动耗时分布、平均内存分布占用、内存峰值占用流量消耗分布情况

     

     


     

     

    “深度兼容测试”现已对外,腾讯专家为您定制自动化测试脚本,覆盖应用核心场景,对上百款主流机型进行适配兼容测试,提供详细测试报告

    点击:http://wetest.qq.com/cloud/deepcompatibilitytesting#/ 即可体验。

     

    如果使用当中有任何疑问,欢迎联系腾讯WeTest企业QQ:2852350015

  • 相关阅读:
    Yocto开发笔记之《Tip-bitbake常用命令》(QQ交流群:519230208)
    Yocto开发笔记之《Tip-设置程序开机启动》(QQ交流群:519230208)
    Yocto开发笔记之《Tip-应用程序无法在目标机运行》(QQ交流群:519230208)
    激光雷达技术
    Yocto开发笔记之《网卡配置》(QQ交流群:519230208)
    Yocto开发笔记之《错误记录》(QQ交流群:519230208)
    Yocto开发笔记之《工具使用:TFTP & NFS & SSH》(QQ交流群:519230208)
    Yocto开发笔记之《U-boot启动内核流程》(QQ交流群:519230208)
    自定义选择提示框
    uitextfield输入字符限制
  • 原文地址:https://www.cnblogs.com/wetest/p/10071125.html
Copyright © 2011-2022 走看看