[发明专利]帧间预测的方法和装置

说明书

本申请涉及人工智能领域中的视频编解码技术，提供了一种帧间预测方法，包括：获取预测运动场和运动场残差，所述预测运动场是参考帧的运动场，所述运动场残差的分辨率小于所述参考帧的分辨率；根据所述预测运动场和所述运动场残差生成重建运动场；对所述重建运动场进行上采样生成目标运动场；根据所述目标运动场生成预测帧。由于分辨率较低的运动场残差所含的信息较少，因此，在后续对运动场残差进行熵编码或熵解码的过程中，分辨率较低的运动场残差的熵编码或熵解码的效率更高。此外，上采样能够提高重建运动场的分辨率，从而使预测帧的分辨率与编码图像的分辨率相同。因此，上述方法能够在不影响帧间预测效果的同时提高编码效率和解码效率。

技术领域

本申请涉及人工智能中的视频编解码技术，具体涉及一种帧间预测的方法和装置。

背景技术

视频编码能够减小视频数据中的冗余信息，因此，视频编码对于提高视频的存储效率和传输效率有着重要意义。端到端视频编码是一种新的视频编码方法，其利用神经网络建立重建视频与原始视频的全局优化模型，从而突破了传统视频编码模型只能在局部进行优化的限制。

在端到端视频编码中，编码端对原始视频编码后，需要向解码端传输包含编码结果的码流；解码端收到码流后，需要对码流进行解码，恢复出编码信息，并根据编码信息重建视频。现有的编码效率和解码效率有待提高。

发明内容

本申请提供一种帧间预测的方法和装置，能够提高运动场的编码效率和解码效率。

第一方面，提供了一种帧间预测的方法，包括：获取预测运动场和运动场残差，所述预测运动场是参考帧的运动场，所述运动场残差的分辨率小于所述参考帧的分辨率；根据所述预测运动场和所述运动场残差生成重建运动场；对所述重建运动场进行上采样生成目标运动场；根据所述目标运动场生成预测帧。

上述方法可以由编码端或解码端执行。对于编码端，运动场残差的分辨率小于当前帧的分辨率，并且，运动场残差的分辨率小于参考帧的分辨率；对于解码端，运动场残差的分辨率小于参考帧的分辨率。由于分辨率较低的运动场残差所含的信息比分辨率较高的运动场残差所含的信息少，因此，在后续对运动场残差进行熵编码的过程中，使用分辨率较低的运动场残差进行熵编码的编码效率更高；相应地，使用分辨率较低的运动场残差进行熵解码的解码效率也更高。此外，上采样能够提高重建运动场的分辨率，从而提高了预测帧的分辨率，例如，使预测帧的分辨率与编码图像的分辨率相同。因此，上述方法能够在不影响帧间预测效果的同时提高编码效率和解码效率。

可选地，所述获取预测运动场和运动场残差，包括：获取真实运动场和所述预测运动场，其中，所述真实运动场是当前帧的运动场，所述真实运动场的分辨率小于所述当前帧的分辨率；根据所述真实运动场和所述预测运动场生成运动场残差。

该可选的实施方式由编码端执行，能够在不影响帧间预测效果的同时提高编码效率。

可选地，所述获取预测运动场和运动场残差，包括：从码流中获取所述运动场残差。

该可选的实施方式由解码端执行，能够在不影响帧间预测效果的同时提高解码效率。

可选地，所述真实运动场的分辨率是所述当前帧的分辨率的四分之一，和/或，所述预测运动场的分辨率是所述参考帧的分辨率的四分之一。

当真实运动场的高和宽分别为H/2和W/2时，真实运动场的分辨率为当前帧的分辨率的四分之一；当预测运动场的高和宽分别为H/2和W/2时，预测运动场的分辨率为参考帧的分辨率的四分之一。相比于使用其它分辨率的运动场，本实施例可以取得更好的压缩效果。

第二方面，本申请提供了一种帧间预测装置，包括用于实施第一方面的任意一种方法的若干个功能单元。例如，帧间预测装置可以包括：

获取单元，用于获取预测运动场和运动场残差，所述预测运动场是参考帧的运动场，所述运动场残差的分辨率小于所述参考帧的分辨率；