[发明专利]视线角度调整方法、装置、电子设备及存储介质在审
申请号: | 202111013443.0 | 申请日: | 2021-08-31 |
公开(公告)号: | CN113641247A | 公开(公告)日: | 2021-11-12 |
发明(设计)人: | 李冰川 | 申请(专利权)人: | 北京字跳网络技术有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01 |
代理公司: | 北京远智汇知识产权代理有限公司 11659 | 代理人: | 范坤坤 |
地址: | 100190 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视线 角度 调整 方法 装置 电子设备 存储 介质 | ||
1.一种视线角度调整方法,其特征在于,包括:
采集目标用户的待处理面部图像;
基于目标视线角度调整模型对所述待处理面部图像进行处理,得到与所述待处理面部图像相对应的目标面部图像;其中,所述目标视线角度调整模型用于将面部图像中用户的视线调整至目标角度;
将所述目标面部图像展示至至少一个客户端。
2.根据权利要求1所述的方法,其特征在于,所述采集目标用户的待处理面部图像,包括:
在用户基于实时互动界面进行互动时,采集目标用户的待处理面部图像;或,当检测到触发预设事件时,基于摄像模块采集所述目标用户的待处理面部图像。
3.根据权利要求2所述的方法,其特征在于,所述在用户基于实时互动界面进行互动时,采集目标用户的待处理面部图像,包括:
在用户基于实时互动界面进行互动时,确定当前发言用户并将所述发言用户作为目标用户;
基于摄像模块采集所述目标用户的待处理面部图像。
4.根据权利要求1所述的方法,其特征在于,在所述基于预先训练得到的目标视线角度调整模型对所述待处理面部图像进行处理,得到与所述待处理面部图像相对应的目标面部图像之前,还包括:
基于特征检测模块,确定待处理面部图像中的视线特征是否与预设视线特征相匹配;
若否,则基于所述目标视线角度调整模型对所述待处理面部图像进行处理,以得到所述目标面部图像。
5.根据权利要求4所述的方法,其特征在于,所述基于所述目标视线角度调整模型对所述待处理面部图像进行处理,以得到所述目标面部图像,包括:
将所述待处理面部图像输入至所述目标视线角度调整模型中,得到所述目标面部图像;其中,所述目标面部图像中的视线角度与所述待处理图像中的视线角度相异。
6.根据权利要求1所述的方法,其特征在于,所述将所述目标面部图像展示至至少一个客户端,包括:
将与所述目标面部图像相对应的多媒体数据流发送至与所述目标用户相关联的至少一个客户端上进行展示。
7.根据权利要求1所述的方法,其特征在于,还包括:
获取训练样本集;其中,所述训练样本集中包括多个训练样本,每个训练样本中包括目标视线角度图像和非目标视线角度图像,所述训练样本是基于预先训练得到的目标样本生成模型确定的;
针对各训练样本,将当前训练样本中的非目标视线角度图像输入至待训练视线角度调整模型中,得到与所述当前训练样本相对应的实际输出图像;
根据当前训练样本的实际输出图像和目标视线角度图像,确定损失值,并基于所述损失值和与所述待训练视线角度调整模型的预设损失函数,调整所述待训练视线角度调整模型的模型参数;
将所述预设损失函数收敛作为训练目标,得到所述目标视线角度调整模型。
8.根据权利要求7所述的方法,其特征在于,训练得到所述目标样本生成模型中的非目标视线角度图像生成子模型,包括:
将预先采集的各高斯分布向量和原始非正视图像样本输入至待训练非目标视线角度生成子模型中,得到误差值;
基于所述误差值和与所述待训练非目标视线角度图像生成子模型中的损失函数,对所述待训练非目标视线角度图像生成子模型中的模型参数进行修正;
将所述损失函数收敛作为训练目标,得到所述非目标视线角度图像生成子模型,以基于所述非目标视线角度图像生成子模型生成所述训练样本中的非目标视线角度图像。
9.根据权利要求8所述的方法,其特征在于,所述将预先采集的高斯分布向量和原始非正视图像样本输入至待训练非正视样本图像生成子模型中,得到误差值,包括:
基于所述非目标视线角度图像生成子模型中的生成器对所述高斯分布向量进行处理,得到待比较图像;
基于判别器对所述原始非正视图像和所述待比较图像进行处理,得到所述误差值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字跳网络技术有限公司,未经北京字跳网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111013443.0/1.html,转载请声明来源钻瓜专利网。