[发明专利]一种基于内容预测的深度学习视频解码方法和装置

摘要

本发明提供了一种基于内容预测的深度学习视频解码方法和装置，所述方法在接收到视频流信息后，一边将解析出的当前帧信息发送至显示屏进行显示，另一边解析当前帧信息对应的下一关键帧信息作为预判帧信息，并将预判帧信息送往卷积神经网络电路进行识别判断，当检测到预判帧信息与预设内容匹配时，一方面对当前帧信息添加提示信息；另一方面继续提取出下一预判帧信息并将其与预设内容进行匹配，如此循环，直至送往送往卷积神经网络电路进行识别判断的预判帧信息不再与预设内容匹配，此时就可以根据当前预判帧的时间戳和其与当前帧时间戳的差值，确定需要跳帧的片段。上述方案可以对视频播放内容提前进行预测判断，有效满足了用户需求。

主权项

1.一种基于内容预测的深度学习视频解码装置，其特征在于，所述装置包括视频控制单元、视频解码单元、帧缓存单元、卷积神经网络电路、预设内容判定单元、提示信息添加单元、跳帧存储单元、显示控制单元和显示单元；所述帧缓存单元包括当前帧缓存单元和预判帧缓存单元；所述视频控制单元和视频解码单元连接，所述视频解码单元分别与当前帧缓存单元、预判帧缓存单元连接，所述当前帧缓存单元与显示控制单元连接，所述显示控制单元和显示单元连接；所述预判帧缓存单元与卷积神经网络电路连接，所述卷积神经网络电路与预设内容判定单元连接，所述预设内容判定单元分别与视频控制单元、提示信息添加单元、跳帧存储单元连接，所述提示信息添加单元与当前帧缓存单元连接；所述视频控制单元用于接收视频流信息，所述视频流信息包括多帧图像信息，所述多帧图像信息包括当前帧信息和第一预判帧信息，所述第一预判帧信息为当前帧信息对应的下一关键帧信息；所述视频解码单元用于对当前帧信息进行解析，将解析后的当前帧信息存储至当前帧缓存单元中，以及对第一预判帧信息进行解析，将解析后的第一预判帧信息存储至预判帧缓存单元中；所述卷积神经网络电路用于获取预判帧缓存单元中的第一预判帧信息，判断第一预判帧信息与预设内容是否匹配，若匹配则预设内容判定单元用于发送第一控制信号至提示信息添加单元，以及用于发送第二控制信号至视频控制单元；所述视频控制单元用于接收第二控制信号，将第二预判帧信息发送至视频解码单元进行解析，视频解码单元用于将解析后的第二预判帧信息存储至预判帧缓存单元中；所述第二预判帧信息为第一预判帧信息对应的下一关键帧信息；所述卷积神经网络电路用于获取预判帧缓存单元中的第二预判帧信息，判断第二预判帧信息与预设内容是否匹配，若匹配则预设内容判定单元用于发送第一控制信号至提示信息添加单元，以及用于再次发送第二控制信号至视频控制单元；重复上述步骤，直至卷积神经网络电路判定预判帧缓存单元中的预判帧信息与预设内容不匹配，记录此时预判帧缓存单元中的预判帧信息对应的时间戳；所述预设内容判定单元用于将当前预判帧缓存单元中的预判帧信息对应的时间戳信息、以及该时间戳与首次被判定为与预设内容匹配的预判帧信息的时间戳之间的所有帧信息存储至跳帧存储单元中；所述提示信息添加单元用于在接收到第一控制信号，获取当前帧缓存单元中的当前帧信息，对当前帧信息添加提示信息，得到当前帧调整信息，并将当前帧调整信息回写至当前帧缓存单元中；所述显示控制单元用于获取当前帧调整信息并将其传输至显示单元进行显示，所述显示单元用于显示当前帧调整信息。