[发明专利]基于三维动画的视频对照方法、装置、设备及存储介质在审
申请号: | 202110476140.6 | 申请日: | 2021-04-29 |
公开(公告)号: | CN113179376A | 公开(公告)日: | 2021-07-27 |
发明(设计)人: | 刘珂;张义;张娜;王艳 | 申请(专利权)人: | 山东数字人科技股份有限公司 |
主分类号: | H04N5/262 | 分类号: | H04N5/262;H04N21/81;G06T13/40 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 巴翠昆 |
地址: | 250013 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 三维动画 视频 对照 方法 装置 设备 存储 介质 | ||
本申请公开了一种基于三维动画的视频对照方法、装置、设备及存储介质,该方法包括:读取真人运动的视频,并将视频根据帧率分割成多张图片;在统一引擎中针对模型添加固定的虚拟摄像头,在模型运动的过程中对虚拟摄像头的画面进行实时提取;对分割成的图片进行轮廓提取处理,获得第一轮廓图片,同时对实时提取出的画面进行轮廓提取处理,获得第二轮廓图片;将第一轮廓图片与第二轮廓图片进行匹配,找出匹配度高的两张轮廓图片,并同步显现与匹配度高的两张轮廓图片对应的分割成的图片与实时提取出的画面。这样可以实现模型动画与视频人物动作实时同步,使模型动画可以和真人视频对照查看。
技术领域
本发明涉及视频对照领域,特别是涉及一种基于三维动画的视频对照方法、装置、设备及存储介质。
背景技术
模型动画是通过改变一个时间段各个模型在空间的位置及其旋转角度产生的。视频里的真人做的动作是在真实的环境里完成的,由于模型动画是虚拟的,和真人动作多少会有差异,为了让人更好的理解,需要真人动作视频作为辅助参考。
目前,模型动画的播放通常是通过引擎自带的接口控制模型动画的时间轴进行播放的。但是,由于时间轴为固定的,不能跳跃式地播放模型动画。另外,真人视频完成动作各个部分的时间点和模型完成动作各个部分的时间点不匹配,造成了实时对照的时候出现不同的画面,容易给人造成错误的理解。
因此,如何解决模型动画和真人视频不能同步问题,是本领域技术人员亟待解决的技术问题。
发明内容
有鉴于此,本发明的目的在于提供一种基于三维动画的视频对照方法、装置、设备及存储介质,可以实现模型动画与视频人物动作实时同步。其具体方案如下:
一种基于三维动画的视频对照方法,包括:
读取真人运动的视频,并将所述视频根据帧率分割成多张图片;
在统一引擎中针对模型添加固定的虚拟摄像头,在模型运动的过程中对所述虚拟摄像头的画面进行实时提取;
对分割成的图片进行轮廓提取处理,获得第一轮廓图片,同时对实时提取出的画面进行轮廓提取处理,获得第二轮廓图片;
将所述第一轮廓图片与所述第二轮廓图片进行匹配,找出匹配度高的两张轮廓图片,并同步显现与匹配度高的两张轮廓图片对应的分割成的图片与实时提取出的画面。
优选地,在本发明实施例提供的上述基于三维动画的视频对照方法中,对分割成的图片进行轮廓提取处理,获得第一轮廓图片,具体包括:
将分割成的图片中的人物提取出来,得到人物图片;
对所述人物图片进行灰度处理,得到第一灰度图片;
通过所述第一灰度图片边界的围绕关系,确定第一外边界和第一孔边界;
根据所述第一外边界、所述第一孔边界,以及所述第一外边界和所述第一孔边界的层次关系,获得第一轮廓图片。
优选地,在本发明实施例提供的上述基于三维动画的视频对照方法中,对实时提取出的画面进行轮廓提取处理,获得第二轮廓图片,具体包括:
对实时提取出的画面进行灰度处理,得到第二灰度图片;
通过所述第二灰度图片边界的围绕关系,确定第二外边界和第二孔边界;
根据所述第二外边界、所述第二孔边界,以及所述第二外边界和所述第二孔边界的层次关系,获得第二轮廓图片。
优选地,在本发明实施例提供的上述基于三维动画的视频对照方法中,在将所述第一轮廓图片与所述第二轮廓图片进行匹配之前,还包括:
对所述第一轮廓图片与所述第二轮廓图片进行灰度处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东数字人科技股份有限公司,未经山东数字人科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110476140.6/2.html,转载请声明来源钻瓜专利网。