[发明专利]语音交互设备的性能测试方法、装置、设备及可读介质在审
申请号: | 202110232023.5 | 申请日: | 2021-03-02 |
公开(公告)号: | CN114999454A | 公开(公告)日: | 2022-09-02 |
发明(设计)人: | 陈世强 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | G10L15/01 | 分类号: | G10L15/01 |
代理公司: | 北京市立方律师事务所 11330 | 代理人: | 张筱宁 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 交互 设备 性能 测试 方法 装置 可读 介质 | ||
本公开实施例提供了一种语音交互设备的性能检测方法、装置、电子设备及计算机可读介质,该方法包括:向待测的语音交互设备发送测试音频信号,并记录测试音频信号的发送时间戳作为第一时间戳;接收语音交互设备响应于测试音频信号而返回的测试过程数据,测试过程数据包括:针对测试音频信号经自动语音识别处理所得的第一文本、以及针对第一文本经自然语言处理所得的回复文本、以及回复文本经过语音合成所得的回复音频的播放时间戳;根据第一文本和回复文本以及与测试音频信号对应的测试标注文本和回复标注文本,确定语音交互设备的语音识别准确率;根据发送时间戳和播放时间戳,确定语音交互设备的性能耗时指标。该方法提高了性能检测的准确性。
技术领域
本公开涉及计算机技术领域,具体而言,本公开涉及一种语音交互设备的性能测试方法、装置、电子设备及计算机可读介质。
背景技术
随着智能语音交互技术的快速发展,智能语音交互已经从实验室走向市场,针对不同细分领域产生了各种智能语音交互的硬件产品,即语音交互设备。智能语音交互是基于语音输入的新一代交互模式,通过说话就可以得到反馈结果,智能语音交互在智能家居、自动控制、在线教育等领域已经逐渐显露出其强大的技术优势和生命力。针对各种智能语音交互设备,不同厂商针对各自的智能语音交互设备推出了各自的检测方案,这些检测方案往往只关注字准率和句准率。
发明内容
提供该发明内容部分以便以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。该发明内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
仅描述独权方案即可,不用描述从权方案。
本公开针对现有的方式的缺点,提出一种语音交互设备的性能测试方法、装置、电子设备及计算机可读介质,用以解决如何同时确定语音交互处理中语音交互设备的性能耗时指标和语音识别准确率的问题。
第一方面,本公开提供了一种语音交互设备的性能测试方法,包括:
向待测的语音交互设备发送测试音频信号,并记录测试音频信号的发送时间戳作为第一时间戳;
接收语音交互设备响应于测试音频信号而返回的测试过程数据,测试过程数据包括:针对测试音频信号经自动语音识别处理所得的第一文本、以及针对第一文本经自然语言处理所得的回复文本、以及回复文本经过语音合成所得的回复音频的播放时间戳;
根据第一文本和回复文本以及与测试音频信号对应的测试标注文本和回复标注文本,确定语音交互设备的语音识别准确率;
根据发送时间戳和播放时间戳,确定语音交互设备的性能耗时指标。
第二方面,本公开提供了一种语音交互设备的性能测试装置,包括:
第一处理模块,用于向待测的语音交互设备发送测试音频信号,并记录测试音频信号的发送时间戳作为第一时间戳;
第二处理模块,用于接收语音交互设备响应于测试音频信号而返回的测试过程数据,测试过程数据包括:针对测试音频信号经自动语音识别处理所得的第一文本、以及针对第一文本经自然语言处理所得的回复文本、以及回复文本经过语音合成所得的回复音频的播放时间戳;
第三处理模块,用于根据第一文本和回复文本以及与测试音频信号对应的测试标注文本和回复标注文本,确定语音交互设备的语音识别准确率;
第四处理模块,用于根据发送时间戳和播放时间戳,确定语音交互设备的性能耗时指标。
第三方面,本公开提供了一种电子设备,包括:处理器、存储器和总线;
总线,用于连接处理器和存储器;
存储器,用于存储操作指令;
处理器,用于通过调用操作指令,执行本公开第一方面的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110232023.5/2.html,转载请声明来源钻瓜专利网。