[发明专利]数字视网膜视频处理方法、装置、电子设备及存储介质

说明书

本申请公开了一种数字视网膜视频处理方法、装置、电子设备及存储介质。其中，该方法包括：至少部分基于确定的特征编码参考帧确定帧间预测参考帧；和/或至少部分基于确定的帧间预测参考帧确定特征编码参考帧；在视频压缩编码码流中发送参考帧指示信息；其中，所述参考帧指示信息为所述特征参考帧与所述帧间预测参考帧之间的关联关系。

技术领域

本申请涉及计算机图像处理领域，具体涉及一种数字视网膜视频处理方法、装置、电子设备及存储介质。

背景技术

自从数字视网膜概念提出以来，其在视频编解码、视频监控等领域引起了较大的关注。数字视网膜技术的一个重要特点就是视频流和视觉特征流、甚至包括摘要视频流同时进行的双流或多流传输，这对视频检索、视频分析和存储均提供了便利。

然而，发明人在实现本发明实施例相关技术方案的过程中发现，现有技术至少存在以下问题：数字视网膜技术要求前端摄像机或靠近前端的视频处理装置同时具备视频特征处理和视频压缩处理能力，对技术复杂度和处理能力要求都较高，并且发明人发现在特征编码处理中所选择的特征参考帧的选择与视频压缩处理中的帧间编码参考帧的选择存在至少部分结果是可以互相参考甚至直接重用的。因此，如果能设计一种在特征参考帧和帧间预测参考帧选择的协调机制，有利于减少数字视网膜系统中视频处理复杂度。

发明内容

针对现有技术中的上述技术问题，本申请实施例提出了一种数字视网膜视频处理方法、装置、电子设备及计算机可读存储介质，以解决数字视网膜技术中要求前端摄像机或靠近前端的视频处理装置同时具备视频特征处理和视频压缩处理能力，对技术复杂度和处理能力要求都较高的问题。

本申请实施例的第一方面提供了一种数字视网膜视频处理方法，包括：

至少部分基于确定的特征编码参考帧确定帧间预测参考帧；和/或

至少部分基于确定的帧间预测参考帧确定特征编码参考帧；

在视频压缩编码码流或特征处理编码码流中发送参考帧指示信息；其中，所述参考帧指示信息为所述特征参考帧与所述帧间预测参考帧之间的关联关系，包括参考帧选择指示。

在一些实施例中，所述帧间预测参考帧至少部分由特征参考帧替代形成或由若干特征参考帧组合形成。

在一些实施例中，所述特征参考帧至少部分由帧间预测参考帧替代形成或有若干帧间预测参考帧组合形成。

在一些实施例中，所述参考帧选择指示为特征参考帧基于帧间预测参考帧确定的指示和帧间预测参考帧基于特征参考帧确定的指示，包括：帧编码模式指示是否需要参考帧、帧编码模式序列、前向或后向参考帧和是否需要清除参考帧缓存区中的至少一种。

在一些实施例中，所述方法还包括：

至少基于一个所述参考帧选择指示，反馈参考帧选择结果。

在一些实施例中，所述方法还包括：

基于所述确定的帧间预测参考帧反馈的参考帧选择结果，确定特征编码参考帧；和/或

基于所述确定的特征编码参考帧反馈的参考帧选择结果，确定帧间预测参考帧。

本申请实施例的第二方面提供了一种数字视网膜视频处理装置，包括：

参考帧确定模块，至少部分基于确定的特征编码参考帧确定帧间预测参考帧；和/或至少部分基于确定的帧间预测参考帧确定特征编码参考帧；

参考帧指示信息发送模块，用于在视频压缩编码码流或特征处理编码码流中发送参考帧指示信息；其中，所述参考帧指示信息为所述特征参考帧与所述帧间预测参考帧之间的关联关系，包括参考帧选择指示。

在一些实施例中，所述帧间预测参考帧由特征参考帧替代形成或由若干特征参考帧组合形成。