[发明专利]基于场景深度估计的视频帧率上变换系统及方法在审
申请号: | 201910575778.8 | 申请日: | 2019-06-28 |
公开(公告)号: | CN110351511A | 公开(公告)日: | 2019-10-18 |
发明(设计)人: | 张小云;包文博;高志勇;陈立 | 申请(专利权)人: | 上海交通大学 |
主分类号: | H04N7/01 | 分类号: | H04N7/01 |
代理公司: | 上海汉声知识产权代理有限公司 31236 | 代理人: | 庄文莉 |
地址: | 200240 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种基于场景深度估计的视频帧率上变换系统及方法,其中系统包括模块一:光流估计网络;模块二:场景深度估计网络;模块三:上下文提取网络;模块四:插值核估计网络;模块五:深度感知的光流场映射;模块六:自适应插值映射;模块七:中间帧生成网络;本发明利用场景深度估计,提供了在视频帧率上变换中针对暴露遮蔽问题的解决办法;本发明还利用深度学习技术,提供了一种能够被端到端训练的神经网络系统,使得系统能够在大量的无标签的视频数据上进行训练优化。 | ||
搜索关键词: | 场景深度估计 视频帧率 上变换系统 网络 映射 神经网络系统 上下文提取 光流估计 深度感知 视频数据 端到端 光流场 核估计 上变换 中间帧 自适应 遮蔽 标签 暴露 优化 学习 | ||
【主权项】:
1.一种基于场景深度估计的视频帧率上变换系统,其特征在于,包括下列模块:模块一:光流估计网络;模块二:场景深度估计网络;模块三:上下文提取网络;模块四:插值核估计网络;模块五:深度感知的光流场映射;模块六:自适应插值映射;模块七:中间帧生成网络;所述模块一能够估计两帧图像之间的光流场;模块二能够估计两帧图像各自的深度信息;模块三能够提取两帧图像中逐像素的特征信息;模块四能够计算插值滤波器核,该插值滤波器核会被自适应插值映射用到;模块五能够将原始两帧图像之间的光流场映成为内插帧到原始帧之间的光流场;模块六根据输入的光流场和插值核,将待插值的信息如像素、像素上下文特征、场景深度等进行自适应映射,得到中间帧对应的信息;模块七对映射到中间帧的信息进行处理,得到最终的中间帧像素。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海交通大学,未经上海交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910575778.8/,转载请声明来源钻瓜专利网。