智能语音自动化测试解决方案-Mario-06

易诚高科-智能语音自动化测试解决方案

——提高智能语音产品质量，降低人为误差、提升测试管理水平

随着社会信息化的加快，智能产品的语音测试与问题定位需求剧增。为了提升测试效率，降低测试人员人为操作误差，最佳测试方式就是采用自动化测试。但由于智能产品的产品形态、语音反应、智能化操作等方面形式不尽相同，在自动化测试的前提下，问题的定位和状态断言的准确性就成为了一个新的挑战。

作为AIoT场景仿真服务商，易诚高科专注于为AIoT行业提供基于场景仿真的产品研发、测试、验收以及预认证等软硬结合的全栈式解决方案。在拥有1200+Lab仿真场景、2000+室外场景、1000万行业场景数据基础上，易诚高科充分理解智能语音产品自动化测试痛点和需求。依托人工智能和数字孪生技术，从应用、架构和用户体验三个维度出发，易诚高科推出了智能语音产品自动化测试解决方案及智能语音慧测仪Mario，帮助企业提高智能语音产品质量，降低人为误差、提升测试管理水平。

1.解决方案-慧测仪Mario的功能

整体架构由下而上依次分为多模态组件及算法、主控设备的各项管理模块、测试任务创建及管理、数据汇总及报告管理。产品在基础数据分析和整理的基础上，适用于各种智能语音产品的真实用户场景，将自动化、自由化与真实用户场景整合为一个统一的整体, 实现测试效率提升、测试数据准确、测试场景真实的三维综合效果。

图1Mario功能界面

如上图Mario的主要功能包含新增测试任务、测试报告记录、设备管理、产品管理、评级管理以及系统管理。其中

●新增任务模块

分为自定义任务和场景任务两类，其中自定义任务分为唤醒任务、误唤醒任务、识别任务和链路任务，链路任务又分为语音交互和触控交互；场景任务分为场景任务管理和场景任务测试。每类新增任务的数据参数依据各自测试任务需求调整。

●测试报告记录模块

记录报告模块是对所有测试结束的任务报告进行处理的管理模块，在该模块中，测试报告可实现详情查看、报告导出、按照之前报告的参数配置重复测试、删除等系列操作。

●设备管理模块

设备管理模块是测试用多模态组件的管理模块，包含信息包含对多模态组件名称的自定义、电量展示、MAC地址信息、在线状态、设备类型、所关联的被测产品以及所属的测试空间信息，功能主要对多模态组件的增、删、查。

●产品管理模块

产品管理为对被测试产品的管理，相关信息包含被测产品的品牌名称、功能分类、设备类型、产品名称及型号，以及对被测产品的增、删、改、查。

●评级管理模块

评级管理包含对唤醒测试、误唤醒测试、识别测试以及链路测试的评级标准的设置，可以实现对相关标准的增、删、改、查。测试结果数据会依据自定义的标准对测试结果和报告进行相应的评级结果展示。

●系统管理模块

系统管理包括各项测试的存储路径和系统信息及管理。

2.方案优势

2.1.无线通讯设计

慧测仪与多模态组件、多模态组件与被测设备之间在保证测试精度和传输效率的前提下实现无线通讯，保证了被测设备在空间多变、形态多变和测试结果反馈多变的情况下，实现通讯数据的收集。

2.2.强大的扩展能力

慧测仪多模态组件是通过无线通讯实现的，不受制于数据线或者连接端口的限制，使用多模态组件对被测设备的扩展能力大大加强。

2.3.全场景应用

针对不同种类测试，语音唤醒测试、语音识别测试和链路测试等各种语音交互测试涉及的家居场景、车机场景、商场场景等需要保证产品用户场景一致性的测试需求均可满足。其数据和SDK集成前验证的算法验证，也能保证研发场景测试的需求。

2.4.集多功能于一体

远程控制测试任务

自动化测试系统可实现测试任务的远程控制，慧测仪、多模态组件以及被测设备之间的无线通讯也为远程控制提供便利。

测试报告管理

对于各类已经完成测试的报告汇总，可以实现分类管理并形成纵向版本迭代的数据追溯。

设备管理

可实现对多模态组件的增加、删除、编辑、查询。

产品管理

可实现对被测设备的增加、删除、编辑、查询。

评级管理

可实现对各类测试结果评判登记标准的自定义，主要功能也是增加、删除、编辑、查询。

3.应用场景

3.1.智能家居场景

智能家居环境中各个智能设备分布在不同的空间，并且由主控语音设备对所有智能家居产品进行语音交互控制，慧测仪及其多模态传感器在其无线通讯的条件下，可对全屋智能家居场景下的语音交互能力测试实现自动化。

其他智能设备包括不限于智能移动终端、智能穿戴设备、智能家居机器人等设备在家居环境的使用占比较大，对于这类设备在用户真实使用环境中的测试也在Mario的应用场景范围内。

图2家居环境

3.2.智能机车场景

车联网的人机交互进程不断加快，车机的特殊环境对于实验室测试数据与真实环境的误差较大，慧测仪及其多模态组件可以在车辆行驶的真实环境中对各语音设备包括车机和移动终端语音交互能力的测试，避免实验室模拟环境的误差。

图3车机环境