[发明专利]一种音色转换方法及计算设备有效

专利信息
申请号: 201710443089.2 申请日: 2017-06-13
公开(公告)号: CN107240401B 公开(公告)日: 2020-05-15
发明(设计)人: 张康;方博伟;卓鹏鹏;尤嘉华;张伟 申请(专利权)人: 厦门美图之家科技有限公司
主分类号: G10L21/007 分类号: G10L21/007;G10L25/03;G10L25/48
代理公司: 北京思睿峰知识产权代理有限公司 11396 代理人: 谢建云;赵爱军
地址: 361008 福建省厦门*** 国省代码: 福建;35
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 音色 转换 方法 计算 设备
【说明书】:

发明公开了一种音色转换方法,该方法适于根据待处理语音的音素从预置的源‑目标音素特征单元对中搜索匹配的语音进行转换,包括步骤:提取待处理语音中每一帧语音的特征;计算待处理语音中每一帧语音所属音素,将同一音素内的连续帧作为一个音素集;按顺序将一个音素集分成一个或多个第一帧长的音素单元,其中相邻音素单元之间相互重叠第二帧长;根据每帧语音的特征拼接得到对应音素单元的特征;对于每个音素单元,根据其音素和特征从源‑目标音素特征单元对中选取出代价最小的目标音素特征单元,作为最优音素特征单元;对多个音素单元对应的多个最优音素特征单元进行时域拼接处理,得到音色转换后的语音。本发明一并公开了相应的计算设备。

技术领域

本发明涉及音频处理技术领域,尤其是一种音色转换方法及计算设备。

背景技术

在现有电影或电视剧的配音中,演员需要根据电影或电视剧的剧本台词进行语音录入,这种情形下,若是电影或电视剧稍有改动就需要演员再重新录制配音,而演员一般排期紧、价位高,这对制片方或者演员来说都是非常不划算的。

现有的语音合成技术,大部分都只能合成某个固定人的声音;另有一些语音合成技术可以合成需要的说话人声音,但是计算量非常大,运行时间长,无法用于实际。

而在实际生活中,人们常常会对一些诸如男女音色转换的应用表现出很大的兴趣。因此,需要一种能够将用户的语音转换成具有另一种音色的语音的方法。

现有的音色转换方法,主要分为基于高斯混合模型的音色转换方法和基于音素拼接的音色转换方法。前者主要的缺点是存在过拟合或欠拟合的毛病,表现为音质单薄、音色与目标音色有较大差距;而后者虽然可以使转换后的语音更加符合目标音色,但拼接上存在衔接不流畅的情况。

故而,需要一种音色转换方法,能够使得转换后的语音逼近目标说话人自己说的话。

发明内容

为此,本发明提供了一种音色转换方法及计算设备,以力图解决或者至少缓解上面存在的至少一个问题。

根据本发明的一个方面,提供了一种音色转换方法,该方法适于根据待处理语音的音素从预置的源-目标音素特征单元对中搜索到匹配的语音进行转换,该方法包括步骤:提取待处理语音中每一帧语音的特征;计算待处理语音中每一帧语音所属的音素,将同一音素内的连续帧作为一个音素集;按照顺序将一个音素集分成一个或多个第一帧长的音素单元,其中相邻音素单元之间相互重叠第二帧长;根据每帧语音的特征拼接得到对应音素单元的特征;对于每个音素单元,根据其音素和特征从源-目标音素特征单元对中选取出代价最小的目标音素特征单元,作为最优音素特征单元;以及对多个音素单元对应的多个最优音素特征单元进行时域拼接处理,得到音色转换后的语音。

可选地,在根据本发明的音色转换方法中,还包括建立源语音库和目标语音库的步骤,其中,所述源语音库和目标语音库是平行语料库;在建立源语音库和目标语音库的步骤之后,还包括步骤:根据源语音库和目标语音库中对应语句的特征生成源-目标音素特征单元对,其中,一个源-目标音素特征单元对中包含一个源音素特征单元和与其对应的一个目标音素特征单元。

可选地,在根据本发明的音色转换方法中,根据源语音库和目标语音库中的对应语句的特征生成源-目标音素特征单元对的步骤包括:对源语音库和目标语音库中的对应语句分别进行分帧处理,得到每个语句的源语音序列和目标语音序列;分别提取源语音序列和目标语音序列中每帧语音的特征;根据所提取的特征对源语音序列和目标语音序列进行动态时间规整处理,得到一一对应的源-目标特征帧对;计算目标语音序列中每一帧语音所属的音素;将同一音素内连续帧的目标特征帧所属的源-目标特征帧对作为一个源-目标音素集;以及按照顺序将一个源-目标音素集分成一个或多个第一帧长的源-目标音素特征单元对,其中相邻源-目标音素特征单元对之间相互重叠第二帧长。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于厦门美图之家科技有限公司,未经厦门美图之家科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201710443089.2/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top