[发明专利]基于模型的视频编码的感知优化

摘要

感知统计可以被用于计算指示视频帧的哪些区域对于人类视觉系统而言重要的重要度图。重要度图可以被应用于视频编码处理以增强编码比特流的质量。可以根据编码器的运动矢量来计算时间对比敏感度函数(TCSF)。运动矢量质量度量能够被用于构建真实运动矢量图(TMVM)，该TMVM能够被用于精细化TCSF。空间复杂度图(SCM)可以根据诸如块方差、块亮度、SSIM和边缘强度之类的度量而被计算，并且SCM能够与TCSF组合以获得统一重要度图。重要度图可以被用于通过修改用于选择最佳编码解决方案的准则或者通过修改要被编码的每个目标块的量化来改进编码。

主权项

一种编码具有非重叠目标块的多个视频帧的方法，所述方法包括：使用重要性图来编码所述多个视频帧，使得所述重要性图修改量化，所述量化影响每个视频帧中要被编码的每个目标块的编码质量，所述重要性图通过以下而被形成：使用时间信息和空间信息来配置所述重要性图；以及计算地使能所述重要性图指示所述多个视频帧中的视频帧的哪些部分对于人类感知而言最显著，以使得：(i)在所述重要性图取高值的块中，块量化参数(QP)相对于帧量化参数QPframe被减小，导致那些块的较高质量，以及(ii)在重要性图取低值的目标块中，所述块量化参数相对于所述帧量化参数QPframe被增加，导致那些块的较低质量。