[发明专利]使用一个或更多个神经网络对图像进行上采样在审
申请号: | 202180005531.8 | 申请日: | 2021-10-06 |
公开(公告)号: | CN114641791A | 公开(公告)日: | 2022-06-17 |
发明(设计)人: | 刘实秋;R·波托夫;刘贵林;K·萨普拉;J·巴克;D·塔里安;P·贾妮斯;E·法格霍尔姆;杨磊;K·施;M·萨尔维;T·罗曼;A·陶;B·卡坦扎罗 | 申请(专利权)人: | 辉达公司 |
主分类号: | G06T3/40 | 分类号: | G06T3/40;G06T5/00;G06T5/50;H04N5/232;H04N5/349 |
代理公司: | 北京市磐华律师事务所 11336 | 代理人: | 高伟 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 使用 一个 更多 神经网络 图像 进行 采样 | ||
1.一种处理器,包括:
一个或更多个电路,用于使用一个或更多个神经网络至少部分地基于一个或更多个子像素偏移值确定一个或更多个像素权重。
2.根据权利要求1所述的处理器,其中所述子像素偏移值是根据抖动感知上采样过程确定的,所述抖动感知上采样过程用于对一个或更多个渲染的图像进行上采样,以便生成一个或更多个上采样图像,针对所述一个或更多个上采样图像的所述一个或更多个像素权重将被确定。
3.根据权利要求2所述的处理器,其中所述一个或更多个渲染的图像与图像序列相对应,并且其中所述一个或更多个像素权重要被用于执行所述一个或更多个上采样图像的像素值与所述图像序列中的一个或更多个先前的上采样图像的像素值的加权混合。
4.根据权利要求3所述的处理器,其中所述一个或更多个像素权重包括第一像素权重,所述第一像素权重用于所述一个或更多个上采样图像的像素值与一个或更多个先前的上采样图像的像素值的第一混合,以生成一个或更多个中间图像表示,其中所述第一混合仅应用于与所述一个或更多个渲染的图像中的使用所述一个或更多个子像素偏移所确定的样本位置相对应的像素的所述一个或更多个上采样图像的像素值。
5.根据权利要求4所述的处理器,其中所述一个或更多个像素权重包括第二像素权重,所述第二像素权重用于所述一个或更多个上采样图像的所有像素值与所述一个或更多个中间图像表示的像素值的第二混合,以生成所述序列中的一个或更多个输出图像。
6.根据权利要求5所述的处理器,其中所述第一像素权重和所述第二像素权重由所述一个或更多个神经网络确定,并且其中所述第一像素权重高于所述第二像素权重。
7.一种系统,包括:
一个或更多个处理器,用于使用一个或更多个神经网络至少部分地基于一个或更多个子像素偏移值确定一个或更多个像素权重。
8.根据权利要求7所述的系统,其中所述子像素偏移值是根据抖动感知上采样过程确定的,所述抖动感知上采样过程用于对一个或更多个渲染的图像进行上采样,以便生成一个或更多个上采样图像,针对所述一个或更多个上采样图像的所述一个或更多个像素权重将被确定。
9.根据权利要求8所述的系统,其中所述一个或更多个渲染的图像与图像序列相对应,并且其中所述一个或更多个像素权重要被用于执行所述一个或更多个上采样图像的像素值与所述图像序列中的一个或更多个先前的上采样图像的像素值的加权混合。
10.根据权利要求9所述的系统,其中所述一个或更多个像素权重包括第一像素权重,所述第一像素权重用于所述一个或更多个上采样图像的像素值与一个或更多个先前的上采样图像的像素值的第一混合,以生成一个或更多个中间图像表示,其中所述第一混合仅应用于与所述一个或更多个渲染的图像中的如使用所述一个或更多个子像素偏移所确定的样本位置相对应的像素的所述一个或更多个上采样图像的像素值。
11.根据权利要求10所述的系统,其中所述一个或更多个像素权重包括第二像素权重,所述第二像素权重用于所述一个或更多个上采样图像的所有像素值与所述一个或更多个中间图像表示的像素值的第二混合,以生成所述序列中的一个或更多个输出图像。
12.根据权利要求11所述的系统,其中所述第一像素权重和所述第二像素权重由所述一个或更多个神经网络确定,并且其中所述第一像素权重高于所述第二像素权重。
13.一种方法,包括:
使用一个或更多个神经网络至少部分地基于一个或更多个子像素偏移值确定一个或更多个像素权重。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于辉达公司,未经辉达公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202180005531.8/1.html,转载请声明来源钻瓜专利网。