[发明专利]图像处理方法及装置在审

专利信息
申请号: 202110915053.6 申请日: 2021-08-10
公开(公告)号: CN113516762A 公开(公告)日: 2021-10-19
发明(设计)人: 杨跃;董治;雷兆恒 申请(专利权)人: 腾讯音乐娱乐科技(深圳)有限公司
主分类号: G06T17/00 分类号: G06T17/00;G06T7/70;G06T5/50;G06N3/04;G06N3/08
代理公司: 广州三环专利商标代理有限公司 44202 代理人: 熊永强;杜维
地址: 518000 广东省深圳市*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 图像 处理 方法 装置
【说明书】:

本申请实施例公开了一种图像处理方法及装置。该方法包括:获取目标图像以及确定动作参考视频。当检测到目标图像中包括目标图像对象,且确定目标图像对象的姿势满足预设条件时,获取目标图像对象对应的第一3D模型图。获取动作参考视频的目标参考图像中参考图像对象对应的第二3D模型图。根据目标图像对象、第一3D模型图、第二3D模型图,生成目标图像对象模拟目标参考图像中参考图像对象动作的合成图像,以便于得到目标动作视频,即对多张合成图像进行视频合成处理,以得到目标动作视频。目标参考图像为多帧参考图像中的一帧参考图像。采用本申请实施例,可提高图像处理效率,增强用户体验感,适用性高。

技术领域

本申请涉及计算机技术领域,尤其涉及一种图像处理方法及装置。

背景技术

随着网络应用的不断发展,各种舞蹈类游戏逐渐丰富起来。通常而言,当用户想要模仿舞蹈视频中人物的舞蹈动作,以生成用户跳这段舞蹈的视频时,通常需要用户先上传一段自己跳舞的原始视频,根据这一段原始视频训练出一个生成器,然后用户将自身图像和想要模仿的舞蹈视频输入这个生成器以生成用户模仿该舞蹈视频进行跳舞的视频。但是这种方式需要用户上传一段自己跳舞的原始视频以训练生成器,导致用户体验较差,另外针对不同的用户都需要学习对应的生成器,学习成本高且图像处理效率低。

发明内容

本申请实施例提供一种图像处理方法及装置,可提高图像处理效率,增强用户体验感,适用性高。

第一方面,本申请实施例提供了一种图像处理方法,该方法包括:

获取目标图像以及确定动作参考视频,上述动作参考视频包括多帧参考图像,上述多帧参考图像中每帧参考图像包括参考图像对象;

当检测到上述目标图像中包括目标图像对象,且确定上述目标图像对象的姿势满足预设条件时,获取上述目标图像对象对应的第一3D模型图;

获取上述动作参考视频的目标参考图像中参考图像对象对应的第二3D模型图,上述目标参考图像为上述多帧参考图像中的一帧参考图像;

根据上述目标图像对象、上述第一3D模型图、上述第二3D模型图,生成上述目标图像对象模拟上述目标参考图像中参考图像对象动作的合成图像;

对多张所述合成图像进行视频合成处理,以得到目标动作视频。

结合第一方面,在一种可能的实施方式中,上述方法还包括:

对上述目标图像进行姿态识别处理,得到上述目标图像中包括的多个人体关键点的关键点信息,其中,关键点信息中包括人体关键点的位置坐标信息和置信度信息;

根据上述多个人体关键点信息确定上述目标图像中是否包括目标图像对象,以及根据上述多个人体关键点信息确定上述目标图像对象的姿势是否满足预设条件。

结合第一方面,在一种可能的实施方式中,上述根据上述多个人体关键点信息确定上述目标图像中是否包括目标图像对象,包括:

确定上述多个人体关键点信息中置信度信息大于或者等于第一预设阈值的人体关键点数量;

若上述人体关键点数量大于或者等于第二预设阈值,则确定上述目标图像中包括目标图像对象。

结合第一方面,在一种可能的实施方式中,位置坐标信息包括横坐标值和纵坐标值;上述多个人体关键点包括左肩、左手、右肩和右手;

上述根据上述多个人体关键点信息确定上述目标图像对象的姿势是否满足预设条件,包括:

若上述左手的横坐标值小于上述左肩的横坐标值,上述右手的横坐标值大于上述右肩的横坐标值,且上述左手的横坐标值与上述右手的横坐标值的差值绝对值大于第三预设阈值,则确定上述目标图像对象的姿势满足预设条件;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯音乐娱乐科技(深圳)有限公司,未经腾讯音乐娱乐科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110915053.6/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top