[发明专利]风格化对象的驱动方法及装置、介质和电子设备在审
申请号: | 202210366513.9 | 申请日: | 2022-04-08 |
公开(公告)号: | CN114693845A | 公开(公告)日: | 2022-07-01 |
发明(设计)人: | 王顺飞 | 申请(专利权)人: | OPPO广东移动通信有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40;G06T17/00;G06T15/00 |
代理公司: | 深圳市隆天联鼎知识产权代理有限公司 44232 | 代理人: | 刘抗美 |
地址: | 523860 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 风格 对象 驱动 方法 装置 介质 电子设备 | ||
1.一种风格化对象的驱动方法,其特征在于,包括:
在包含目标对象的视频中截取所述目标对象为中性表情的中性目标对象,并基于所述中性目标对象计算特征形变参数;其中,所述特征形变参数包括将中性预设对象转换为中性目标对象的形变参数;
基于所述中性预设对象、所述特征形变参数和第一形变参数重建风格化中性目标对象;其中,所述第一形变参数包括将所述中性预设对象转换为风格化中性预设对象的形变参数;
基于所述中性预设对象、所述特征形变参数和第二形变参数生成风格化目标表情基;其中,所述第二形变参数包括将所述中性预设对象转换为风格化预设表情基的形变参数;
基于所述视频和所述风格化目标表情基对所述风格化中性目标对象进行驱动。
2.根据权利要求1所述的方法,其特征在于,所述基于所述视频和所述风格化目标表情基对所述风格化中性目标对象进行驱动,包括:
对所述视频中的当前视频帧进行关键点检测,以确定所述目标对象在所述当前视频帧中的表情参数和位姿参数;
根据所述表情参数、所述风格化目标表情基对所述风格化中性目标对象进行表情变换,得到所述当前视频帧对应的表情驱动结果;
基于所述位姿参数对所述表情驱动结果进行位姿变换,得到所述当前视频帧对应的驱动结果。
3.根据权利要求2所述的方法,其特征在于,所述根据所述表情参数、所述风格化目标表情基对所述风格化中性目标对象进行表情变换,得到所述当前视频帧对应的表情驱动结果,包括:
以所述表情参数为权重,对所述风格化目标表情基和风格化中性目标对象进行加权组合,得到所述当前视频帧对应的表情驱动结果。
4.根据权利要求1所述的方法,其特征在于,所述基于所述中性预设对象、所述特征形变参数和第一形变参数重建风格化中性目标对象,包括:
对所述特征形变参数和所述第一形变参数进行参数组合,得到第一风格化参数;
基于所述第一风格化参数对所述中性预设对象进行形变变换,得到风格化中性目标对象。
5.根据权利要求1所述的方法,其特征在于,所述基于所述中性预设对象、所述特征形变参数和第二形变参数生成风格化目标表情基,包括:
对所述特征形变参数和所述第二形变参数进行参数组合,得到第二风格化参数;
基于所述第二风格化参数对所述中性预设对象进行形变变换,得到风格化目标表情基。
6.根据权利要求1所述的方法,其特征在于,所述基于所述中性目标对象计算特征形变参数,包括:
将所述中性目标对象输入特征参数模型,以获取将所述中性预设对象转换为中性目标对象的形变参数。
7.根据权利要求1所述的方法,其特征在于,所述在包含目标对象的视频中截取所述目标对象为中性表情的中性目标对象,包括:
对所述视频中的每一个视频帧进行目标对象检测,以确定所述目标对象在各所述视频帧中的特征属性;
基于所述特征属性确定所述目标对象为中性表情的中性视频帧,并截取所述中性视频帧中的目标对象,得到中性目标对象。
8.一种风格化对象的驱动装置,其特征在于,包括:
参数确定模块,用于在包含目标对象的视频中截取所述目标对象为中性表情的中性目标对象,并基于所述中性目标对象计算特征形变参数;其中,所述特征形变参数包括将中性预设对象转换为中性目标对象的形变参数;
风格化重建模块,用于基于所述中性预设对象、所述特征形变参数和第一形变参数重建风格化中性目标对象;其中,所述第一形变参数包括将所述中性预设对象转换为风格化中性预设对象的形变参数;
表情基生成模块,用于基于所述中性预设对象、所述特征形变参数和第二形变参数生成风格化目标表情基;其中,所述第二形变参数包括将所述中性预设对象转换为风格化预设表情基的形变参数;
对象驱动模块,用于基于所述视频和所述风格化目标表情基对所述风格化中性目标对象进行驱动。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210366513.9/1.html,转载请声明来源钻瓜专利网。