[发明专利]视频处理方法、装置、计算机设备及介质在审
申请号: | 202210273317.7 | 申请日: | 2022-03-18 |
公开(公告)号: | CN114612841A | 公开(公告)日: | 2022-06-10 |
发明(设计)人: | 磯部駿;陶鑫;戴宇荣 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06T3/40;G06T7/269 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 李加欣 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 处理 方法 装置 计算机 设备 介质 | ||
1.一种视频处理方法,其特征在于,所述方法包括:
针对视频中的第i帧图像,获取第i-1帧图像的图像特征信息、第一差异信息以及第i+1帧图像的图像特征信息、第二差异信息,所述i为大于1的正整数,所述图像特征信息表示对应图像的细节特征,所述第一差异信息表示对应图像与所述图像的后一帧图像在所述细节特征上的差异,所述第二差异信息表示对应图像与所述图像的前一帧图像在所述细节特征上的差异;
基于所述第i-1帧图像的图像特征信息与第一差异信息,确定第一转换信息,基于所述第i+1帧图像的图像特征信息与第二差异信息,确定第二转换信息,所述第一转换信息表示所述第i-1帧图像转换至所述第i帧图像时所需的参数,所述第二转换信息表示所述第i+1帧图像转换至所述第i帧图像时所需的参数;
基于所述第i帧图像的图像特征信息、所述第一转换信息以及所述第二转换信息,确定所述第i帧图像的超分辨信息;
基于所述视频中多帧图像的超分辨信息,获取超分辨视频。
2.根据权利要求1所述的视频处理方法,其特征在于,所述第i-1帧图像的图像特征信息与第一差异信息的获取过程包括:
将所述第i-1帧图像与所述第i-1帧图像的相邻帧图像输入特征提取网络,通过所述特征提取网络,基于所述第i-1帧图像与所述第i-1帧图像的相邻帧图像提取所述第i-1帧图像的隐层特征,所述特征提取网络基于至少一帧样本图像、所述至少一帧样本图像的相邻帧图像以及所述至少一帧样本图像的隐层特征训练得到;
基于所述第i-1帧图像的隐层特征,确定所述第i-1帧图像的图像特征信息,基于所述第i-1帧图像、所述第i帧图像以及所述第i-1帧图像的隐层特征,确定所述第i-1帧图像的第一差异信息。
3.根据权利要求2所述的视频处理方法,其特征在于,在所述i为大于2的正整数的情况下,所述方法还包括:
将所述第i-1帧图像、所述第i-1帧图像的相邻帧图像以及第i-2帧图像的隐层特征输入所述特征提取网络,通过所述特征提取网络,基于所述第i-1帧图像、所述第i-1帧图像的相邻帧图像以及所述第i-2帧图像的隐层特征提取所述第i-1帧图像的隐层特征,所述特征提取网络基于至少一帧样本图像、所述至少一帧样本图像的相邻帧图像、所述至少一帧样本图像的前一帧图像的隐层特征以及所述至少一帧样本图像的隐层特征训练得到。
4.根据权利要求2所述的视频处理方法,其特征在于,所述基于所述第i-1帧图像的隐层特征,确定所述第i-1帧图像的图像特征信息,基于所述第i-1帧图像、所述第i帧图像以及所述第i-1帧图像的隐层特征,确定所述第i-1帧图像的第一差异信息包括:
将所述第i-1帧图像的隐层特征输入第一特征提取子网络,通过所述第一特征提取子网络,基于所述第i-1帧图像的隐层特征提取所述第i-1帧图像的图像特征信息,所述第一特征提取子网络基于至少一帧样本图像的隐层特征以及所述至少一帧样本图像的图像特征信息训练得到;
将所述第i-1帧图像、所述第i帧图像以及所述第i-1帧图像的隐层特征输入第二特征提取子网络,通过所述第二特征提取子网络,基于所述第i-1帧图像、所述第i帧图像以及所述第i-1帧图像的隐层特征提取所述第i-1帧图像的第一差异信息,所述第二特征提取子网络基于至少一帧样本图像、所述至少一帧样本图像的后一帧图像、所述至少一帧样本图像的隐层特征以及所述至少一帧样本图像的第一差异信息训练得到。
5.根据权利要求1所述的视频处理方法,其特征在于,所述第i+1帧图像的图像特征信息与第二差异信息的获取过程包括:
将所述第i+1帧图像与所述第i+1帧图像的相邻帧图像输入特征提取网络,通过所述特征提取网络,基于所述第i+1帧图像与所述第i+1帧图像的相邻帧图像提取所述第i+1帧图像的隐层特征,所述特征提取网络基于至少一帧样本图像、所述至少一帧样本图像的相邻帧图像以及所述至少一帧样本图像的隐层特征训练得到;
基于所述第i+1帧图像的隐层特征,确定所述第i+1帧图像的图像特征信息,基于所述第i+1帧图像、所述第i帧图像以及所述第i+1帧图像的隐层特征,确定所述第i+1帧图像的第二差异信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210273317.7/1.html,转载请声明来源钻瓜专利网。