[发明专利]用于视频图像编码的编码参数的基于事件自适应

说明书

本公开涉及使用编码参数对视频图像进行编码，编码参数基于与视频图像内的运动有关的事件进行适应。通过标准图像传感器和事件触发传感器捕获图像内容，事件触发传感器提供了指示图像强度变化(例如变化量和时‑空位置变化)的事件信号。基于评估对象的运动的事件信号以及提取的对象的纹理在视频图像内检测对象。基于事件信号的位置和强度以及检测到的对象的移动程度来确定视频图像的空‑时编码参数。事件信号结合对象的纹理信息的使用允许从背景中执行视频图像的分割，从而进一步优化背景和动态图像内容(包括不同大小的快速和慢速运动的对象)的编码。

技术领域

本公开涉及使用编码参数对视频图像进行编码。

背景技术

视频编解码(视频编码和解码)用于广泛的数字视频应用，例如广播数字TV、通过互联网和移动网络的视频传输、诸如视频聊天和视频会议的实时对话应用、DVD和蓝光盘、视频内容获取和编辑系统、以及安全应用的便携式摄像机。

自从1990年H.261标准中开发基于块的混合视频编码方法以来，开发了新的视频编解码技术和工具并形成了新的视频编码标准的基础。大多数视频编码标准的目标之一是在不牺牲图片质量的情况下与之前标准相比降低比特率。其他的视频编码标准包括MPEG-1视频、MPEG-2视频、ITU-TH.262/MPEG-2、ITU-TH.263、ITU-TH.264/MPEG-4第10部分(Part10)、高级视频编码(advanced video coding，AVC)、ITU-TH.265、高效视频编码(highefficiency video coding，HEVC)、以及这些标准的扩展，例如可缩放性和/或三维(three-dimensional，3D)扩展。

在例如H.264/AVC或HEVC(H.265)或下一代的一些当前视频编码器和解码器中，用于视频图像编码的编码参数(如帧率、图像尺寸、或量化参数(quantization parameter，QP))通常是预设的(例如由使用编码器的用户或应用预设)并指示给编码器。然而，在计算机视觉设备和应用(例如视频监控应用)中，关键问题是如何确定这些编码参数以获得优化的性能。

发明内容

因此，对于计算机视觉应用，需要根据特定应用控制图像/视频编码和解码的速率。利用事件(即事件驱动相机提供的事件信号)可以尤其适用于控制图像/视频编解码速率。

本发明实施例由独立权利要求的特征定义，实施例的其他有利实施方式由从属权利要求的特征定义。

根据本公开的一个方面，提供了一种用于对视频图像的样本进行编码的装置，该装置包括处理电路，该处理电路用于：从图像传感器获得视频图像；从事件触发传感器获得指示图像强度变化的位置的事件信号；根据获得的事件信号确定用于对视频图像进行编码的编码参数；以及通过应用确定的编码参数对视频图像进行编码。

这可以提供的优势是，通过组合低空间分辨率动态图像特征与高空间分辨率视频图像，以高准确度确定用于对视频图像进行编码的编码参数。

根据本公开的一个方面，上述事件信号还指示了相应位置的图像强度变化的量。

根据本公开的一个方面，上述装置的处理电路还用于：基于事件信号确定指示视频图像中的对象的运动的运动信息；以及基于上述运动信息检测视频图像内与图像强度变化的位置对应的位置上的对象。

例如，当运动信息等于或大于第一预定阈值时，检测到对象。

这可以提供的优势是，使用事件信号作为动态特征，快速且准确地检测到视频图像内的对象。特别地，准确地检测到视频图像内快速移动的对象。

根据本公开的一个方面，上述运动信息是使用图像强度变化的度量来计算的。

根据本公开的一个方面，上述处理电路用于：根据计算的运动信息和/或检测到的对象确定与视频图像的时间分辨率和空间分辨率有关的编码参数。