[发明专利]语音评测方法、相关设备及可读存储介质在审
| 申请号: | 202111476484.3 | 申请日: | 2021-12-06 |
| 公开(公告)号: | CN114155831A | 公开(公告)日: | 2022-03-08 |
| 发明(设计)人: | 胡阳;张武旭;汪张龙 | 申请(专利权)人: | 科大讯飞股份有限公司 |
| 主分类号: | G10L15/00 | 分类号: | G10L15/00;G10L15/02;G10L15/04;G10L15/06;G10L15/26;G10L25/60;G06F40/30;G09B19/06 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 宋东阳 |
| 地址: | 230088 安徽*** | 国省代码: | 安徽;34 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 语音 评测 方法 相关 设备 可读 存储 介质 | ||
1.一种语音评测方法,其特征在于,所述方法包括:
获取待评测语音;
确定所述待评测语音的语言组织评估特征、音段评估特征以及跟读节奏评估特征;
根据所述待评测语音的语言组织评估特征、音段评估特征以及跟读节奏评估特征,确定所述待评测语音的评测结果。
2.根据权利要求1所述的方法,其特征在于,所述确定所述待评测语音的语言组织评估特征、音段评估特征以及跟读节奏评估特征,包括:
识别所述待评测语音,得到识别后的文本信息;
基于所述识别后的文本信息与预先构建的语义网络,确定所述待评测语音的语言组织评估特征;
基于预先构建的带时间戳的限定文本解码网络,对所述待评测语音进行解码,确定所述待评测语音的音段评估特征以及跟读节奏评估特征。
3.根据权利要求2所述的方法,其特征在于,所述语义网络的构建方式如下:
获取作为评测标准的示范音、与所述示范音对应的原文文本,与所述原文文本对应的目标语言的译文文本;
基于所述原文文本,所述译文文本,构建语义网络。
4.根据权利要求3所述的方法,其特征在于,所述基于所述原文文本,所述译文文本,构建语义网络,包括:
对所述译文文本,进行反向翻译,确定候选原文文本;
基于所述原文文本,以及所述候选原文文本确定文本集合;
基于所述文本集合构建语义网络,所述语义网络包括多个并行的语义路径,每个语义路径对应所述文本集合中的一个文本。
5.根据权利要求4所述的方法,其特征在于,所述基于所述识别后的文本信息与预先构建的语义网络,确定所述待评测语音的语言组织评估特征,包括:
计算所述识别后的文本信息在所述语义网络中各个语义路径的内容覆盖度;
基于所述识别后的文本信息在所述语义网络中各个语义路径的内容覆盖度,确定所述待评测语音的语言组织评估特征。
6.根据权利要求3所述的方法,其特征在于,所述带时间戳的限定文本解码网络的构建方式如下:
基于所述示范音、所述原文文本,建立带时间戳的限定文本解码网络。
7.根据权利要求6所述的方法,其特征在于,所述基于所述示范音、所述原文文本,建立带时间戳的限定文本解码网络,包括:
基于所述原文文本建立限定文本解码网络;
确定所述示范音的基于语音音素的时间戳;
将所述示范音的基于语音音素的时间戳融入所述限定文本解码网络,构建得到带时间戳的限定文本解码网络。
8.根据权利要求7所述的方法,其特征在于,所述带时间戳的限定文本解码网络,包括起始层、结束层、语音音素单元层以及前述所有层之间的吸收层;
所述各语音音素单元层分别根据所述原文文本中各单个字符的语音音素构建;每个所述语音音素单元层包括所述语音音素在所述示范音的时间戳;
每个所述语音音素单元层与各吸收层、各语音音素单元层层及结束层之间均可存在跳转弧。
9.根据权利要求8所述的方法,其特征在于,所述带时间戳的限定文本解码网络的训练方法,包括:
获取与所述示范音对应的训练用语音;
针对每个训练用语音,确定所述训练用语音中每个语音音素的跟读节奏评估特征标签以及音段评估特征标签,所述跟读节奏评估特征标签用于表示所述训练用语音中所述语音音素的时间戳与所述示范音中相应语音音素的时间戳是否一致;所述音段评估特征标签用于表示所述训练用语音中所述语音音素对应的各跳转弧的得分;
以所述训练用语音、所述训练用语音的基于音素的时间戳为训练样本,以所述跟读节奏评估特征标签和所述音段评估特征标签为训练标签,训练得到所述带时间戳的限定文本解码网络。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于科大讯飞股份有限公司,未经科大讯飞股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111476484.3/1.html,转载请声明来源钻瓜专利网。





