[发明专利]用于视频插帧的方法、装置及设备

权利要求书

1.一种视频插帧的方法，其特征在于，包括：

获取第一时间的第一图像、第二时间的第二图像以及由动态视觉传感装置采集的传感数据，所述传感数据包括所述第一时间和所述第二时间之间的动态事件数据；以及

基于所述第一图像、所述第二图像以及所述传感数据确定至少一个目标图像，所述至少一个目标图像为所述第一时间和所述第二时间之间的至少一个目标时间对应的图像。

2.根据权利要求1所述的方法，其特征在于，所述至少一个目标图像包括与所述第一时间和所述第二时间之间的第一目标时间对应的第一目标图像，并且所述基于所述第一图像、所述第二图像以及所述传感数据确定所述至少一个目标图像包括：

基于所述传感数据中的第一部分传感数据确定从所述第一目标时间到所述第一时间的第一光流，其中，所述第一部分传感数据包括所述第一时间与所述第一目标时间之间的动态事件数据；

基于所述传感数据中的第二部分传感数据确定从所述第一目标时间到所述第二时间的第二光流，其中，所述第二部分传感数据包括所述第一目标时间与所述第二时间之间的动态事件数据；以及

基于所述第一光流和所述第二光流对所述第一图像和所述第二图像执行插帧操作，以获得所述第一目标时间对应的第一目标图像。

3.根据权利要求2所述的方法，其特征在于，基于所述第一光流和所述第二光流对所述第一图像和所述第二图像执行插帧操作包括：

基于所述第一光流，将所述第一图像转换为第一中间图像；

基于所述第二光流，将所述第二图像转换为第二中间图像；以及

合并所述第一中间图像和所述第二中间图像，以获得所述第一目标图像。

4.根据权利要求3所述的方法，其特征在于，合并所述第一中间图像和所述第二中间图像以获得所述第一目标图像包括：

基于所述第一图像、所述第一部分传感数据和所述第一中间图像调整所述第一光流，以得到第一调整光流；

基于所述第一调整光流，将所述第一图像转换为第三中间图像；以及

合并所述第三中间图像和所述第二中间图像以获得所述第一目标图像。

5.根据权利要求4所述的方法，其特征在于，合并所述第三中间图像和所述第二中间图像以获得所述第一目标图像包括：

基于所述第二图像、所述第二部分传感数据和所述第二中间图像，调整所述第二光流，以得到第二调整光流；

基于所述第二调整光流，将所述第二图像转换为第四中间图像；以及

合并所述第三中间图像和所述第四中间图像以获得所述第一目标图像。

6.根据权利要求5所述的方法，其特征在于，合并所述第三中间图像和所述第四中间图像以获得所述第一目标图像包括：

确定针对所述第三中间图像的第一融合权重和针对所述第四中间图像的第二融合权重，所述第一融合权重图指示所述第三中间图像中的相应像素点的重要程度，所述第二融合权重指示所述第四中间图像中的相应像素点的重要程度；以及

基于所述第一融合权重和所述第二融合权重对所述第三中间图像和所述第四中间图像进行加权合并，以获得所述第一目标图像。

7.根据权利要求6所述的方法，其特征在于，确定所述第一融合权重和所述第二融合权重包括：

基于所述第一图像、所述第一部分传感数据、所述第一光流和所述第一中间图像，确定所述第一融合权重；以及

基于所述第二图像、所述第二部分传感数据、所述第二光流和所述第二中间图像，确定所述第二融合权重。

8.根据权利要求1至7中任一项所述的方法，其特征在于，还包括：

将所述第一图像、所述第二图像和所述至少一个目标图像按时间顺序组织成目标视频片段。

9.根据权利要求1至7中任一项所述的方法，其特征在于，所述第一图像和所述第二图像包括视频片段中所述第一时间的第一视频帧和所述第二时间的第二视频帧，或者

所述第一图像和所述第二图像包括由静态成像装置采集的静态图像。