[发明专利]一种基于视频图像的未来帧预测方法及模型

摘要

本发明提出一种基于视频图像的未来帧预测方法及模型，属于图像模式识别领域。模型包括：记忆回溯模块、记忆精炼模块、特征融合模块以及图像预测模块；方法包括：步骤1、顺序读取视频帧序列，组成固定长度的视频段序列；步骤2、将视频段输入记忆回溯模块，记忆回溯模块对输入的视频段进行空时特征提取；步骤3、对提取的空时特征通过记忆精炼模块，抽象为更高层次的隐含特征；步骤4、将隐含特征与输入的视频段中的最后一帧基于二维神经网络的多通道进行特征融合，最终输出预测的图像帧。本发明通过FFSPRE模型验证了人脑预测未来空间特征的能力，通过实验进一步证明了存在有一个通用的预测机制，能够完成预测短时未来图像的任务。