[发明专利]用于处理信息的方法和装置在审
申请号: | 201910058552.0 | 申请日: | 2019-01-22 |
公开(公告)号: | CN109599113A | 公开(公告)日: | 2019-04-09 |
发明(设计)人: | 刘骁;吕复强;王建祥;纪建超 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G10L15/22 | 分类号: | G10L15/22;G10L21/10;H04N13/106;H04N13/172 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 口型变化 应答语音 三维立体 人像 方法和装置 处理信息 信息控制 音素序列 播放 信息播放 信息生成 用户发送 语音信息 | ||
1.一种用于处理信息的方法,包括:
基于用户发送的语音信息,生成应答语音信息;
根据所述应答语音信息生成音素序列;
根据所述音素序列生成口型变化信息,其中,所述口型变化信息用于在所述应答语音信息播放时,控制所显示的三维立体人像的口型变化;
播放所述应答语音信息,以及根据所述口型变化信息控制所述三维立体人像的口型变化。
2.根据权利要求1所述的方法,其中,所述方法还包括:
获取所述用户发送所述语音信息时所采集的所述用户的视频;
对于所述视频中的视频帧,对该视频帧中的人脸图像进行面部表情识别,得到表情识别结果;
播放所述视频,以及在所播放的当前视频帧中呈现当前视频帧中的人脸图像对应的表情识别结果。
3.根据权利要求2所述的方法,其中,在播放所述视频之前,所述方法还包括:
接收所述用户发送的人脸图像装饰请求,其中,所述人脸图像装饰请求包括装饰用配图选取信息;
根据所述装饰用配图选取信息从预设的装饰用配图集合中选取目标装饰用配图;
将所述目标装饰用配图添加到所述视频的视频帧中。
4.根据权利要求3所述的方法,其中,所述将所述目标装饰用配图添加到所述视频的视频帧中,包括:
间隔第一预设帧数从所述视频中选取视频帧,得到至少一个视频帧;
对于所述至少一个视频帧中的视频帧,对该视频帧中的人脸图像进行人脸关键点检测,得到人脸关键点的位置;根据该视频帧中人脸关键点的位置,将所述目标装饰用配图添加到该视频帧以及该视频帧之后的第二预设帧数的视频帧中。
5.根据权利要求1所述的方法,其中,所述方法还包括:
根据所述音素序列生成手势变化信息,其中,所述手势变化信息用于在所述应答语音信息播放时,控制所显示的三维立体人像的手势变化;以及
所述播放所述应答语音信息,以及根据所述口型变化信息控制所述三维立体人像的口型变化,包括:
播放所述应答语音信息,以及根据所述口型变化信息和所述手势变化信息控制所述三维立体人像的口型变化和手势变化。
6.根据权利要求1所述的方法,其中,所述方法还包括:
基于所述语音信息生成待显示信息,以及对所述待显示信息进行显示。
7.根据权利要求1所述的方法,其中,所述方法还包括:
根据所述语音信息确定目标业务类别;
根据所述目标业务类别确定目标表情信息,以及根据所述目标表情信息控制所述三维立体人像的表情。
8.一种用于处理信息的装置,包括:
第一生成单元,被配置成基于用户发送的语音信息,生成应答语音信息;
第二生成单元,被配置成根据所述应答语音信息生成音素序列;
第三生成单元,被配置成根据所述音素序列生成口型变化信息,其中,所述口型变化信息用于在所述应答语音信息播放时,控制所显示的三维立体人像的口型变化;
播放单元,被配置成播放所述应答语音信息,以及根据所述口型变化信息控制所述三维立体人像的口型变化。
9.根据权利要求8所述的装置,其中,所述装置还包括:
获取单元,被配置成获取所述用户发送所述语音信息时所采集的所述用户的视频;
识别单元,被配置成对于所述视频中的视频帧,对该视频帧中的人脸图像进行面部表情识别,得到表情识别结果;
呈现单元,被配置成播放所述视频,以及在所播放的当前视频帧中呈现当前视频帧中的人脸图像对应的表情识别结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910058552.0/1.html,转载请声明来源钻瓜专利网。