[发明专利]图像处理方法及装置在审

专利信息
申请号: 202110915053.6 申请日: 2021-08-10
公开(公告)号: CN113516762A 公开(公告)日: 2021-10-19
发明(设计)人: 杨跃;董治;雷兆恒 申请(专利权)人: 腾讯音乐娱乐科技(深圳)有限公司
主分类号: G06T17/00 分类号: G06T17/00;G06T7/70;G06T5/50;G06N3/04;G06N3/08
代理公司: 广州三环专利商标代理有限公司 44202 代理人: 熊永强;杜维
地址: 518000 广东省深圳市*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 图像 处理 方法 装置
【权利要求书】:

1.一种图像处理方法,其特征在于,所述方法包括:

获取目标图像以及确定动作参考视频,所述动作参考视频包括多帧参考图像,所述多帧参考图像中每帧参考图像包括参考图像对象;

当检测到所述目标图像中包括目标图像对象,且确定所述目标图像对象的姿势满足预设条件时,获取所述目标图像对象对应的第一3D模型图;

获取所述动作参考视频的目标参考图像中参考图像对象对应的第二3D模型图,所述目标参考图像为所述多帧参考图像中的一帧参考图像;

根据所述目标图像对象、所述第一3D模型图、所述第二3D模型图,生成所述目标图像对象模拟所述目标参考图像中参考图像对象动作的合成图像;

对多张所述合成图像进行视频合成处理,以得到目标动作视频。

2.根据权利要求1所述的方法,其特征在于,所述方法还包括:

对所述目标图像进行姿态识别处理,得到所述目标图像中包括的多个人体关键点的关键点信息,其中,关键点信息中包括人体关键点的位置坐标信息和置信度信息;

根据所述多个人体关键点信息确定所述目标图像中是否包括目标图像对象,以及根据所述多个人体关键点信息确定所述目标图像对象的姿势是否满足预设条件。

3.根据权利要求2所述的方法,其特征在于,所述根据所述多个人体关键点信息确定所述目标图像中是否包括目标图像对象,包括:

确定所述多个人体关键点信息中置信度信息大于或者等于第一预设阈值的人体关键点数量;

若所述人体关键点数量大于或者等于第二预设阈值,则确定所述目标图像中包括目标图像对象。

4.根据权利要求2或3所述的方法,其特征在于,位置坐标信息包括横坐标值和纵坐标值;所述多个人体关键点包括左肩、左手、右肩和右手;

所述根据所述多个人体关键点信息确定所述目标图像对象的姿势是否满足预设条件,包括:

若所述左手的横坐标值小于所述左肩的横坐标值,所述右手的横坐标值大于所述右肩的横坐标值,且所述左手的横坐标值与所述右手的横坐标值的差值绝对值大于第三预设阈值,则确定所述目标图像对象的姿势满足预设条件;

其中,所述第三预设阈值由所述左肩的横坐标值与所述右肩的横坐标值的差值绝对值确定。

5.根据权利要求2或3所述的方法,其特征在于,位置坐标信息包括横坐标值和纵坐标值;所述多个人体关键点包括左脚和右脚;

所述根据所述多个人体关键点信息确定所述目标图像对象的姿势是否满足预设条件,包括:

若所述左脚的横坐标值小于所述右脚的横坐标值,则确定所述目标图像对象的姿势满足预设条件。

6.根据权利要求2或3所述的方法,其特征在于,位置坐标信息包括横坐标值和纵坐标值;所述多个人体关键点包括左眼和右眼;

所述根据所述多个人体关键点信息确定所述目标图像对象的姿势是否满足预设条件,包括:

根据所述左眼的位置坐标信息和所述右眼的位置坐标信息确定所述左眼与所述右眼之间的连线与水平方向的夹角;

若所述夹角小于第四预设阈值,则确定所述目标图像对象的姿势满足预设条件。

7.根据权利要求1-3任一项所述的方法,其特征在于,所述根据所述目标图像对象、所述第一3D模型图、所述第二3D模型图,生成所述目标图像对象模拟所述目标参考图像中参考图像对象动作的合成图像,包括:

根据所述第一3D模型图和所述第二3D模型图确定转换矩阵;

通过人物还原对抗神经网络对所述目标图像对象和所述第一3D模型图进行特征提取处理,并获取所述人物还原对抗神经网络包括的n层第一采样卷积网络中每层第一采样卷积网络输出的第一图像特征参数,n为大于1的整数;

通过图片合成对抗神经网络对所述转换矩阵、所述第二3D模型图、所述每层第一采样卷积网络输出的第一图像特征参数进行处理,得到所述合成图像。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯音乐娱乐科技(深圳)有限公司,未经腾讯音乐娱乐科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110915053.6/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top