[发明专利]一种基于多层级质量因子的全景视频评估方法及系统

说明书

本发明涉及一种基于多层级质量因子的全景视频评估方法及系统，属于多媒体技术领域。本发明将输入一段无损全景视频和一段同样内容的损伤视频，输出损伤视频的质量评估结果，实现对损伤视频的自动评估；其思想是基于多层级的感兴趣区域计算多个质量因子，以应对全景视频中的重要区域对视频质量影响较大的问题；然后通过融合模型将多层级质量因子进行融合，模型参数可由主观数据学习得到，以应对全景视频用户的主观能动性。本方法适用于全景视频质量评估：由于考虑并融合了多层级的用户感兴趣区域对视频质量的影响，得到的损伤视频的质量评价估值与主观实验的评价结果更一致，更适用于对全景视频质量的自动评价。

技术领域

本发明涉及一种全景视频质量评估方法，特别涉及一种基于多层级质量因子的全景视频评估方法及系统，属于多媒体技术领域。

背景技术

随着虚拟现实(Virtual Reality,简称VR)技术的发展,普通的平面视频正逐渐被360度全景视频所取代。全景视频是指针对一个固定的观察点提供水平范围360度，垂直范围180度自由浏览的视频，可以给予VR用户更强的沉浸感以及更加身临其境的体验。随着这种新型多媒体业务的普及，全景视频的用户体验质量对于虚拟现实系统中关键技术的发展以及传输网络的优化具有重要意义。然而，全景视频质量评估是一个复杂问题，因为相比于普通平面视频，全景视频观看者的体验会受到多种因素的影响，包括更多的心理和生理因素的影响、感兴趣区域等主观因素的影响。传统的视频质量评估方法不能准确反映全景视频的质量。研究适用于全景视频的评估方法及系统对于VR技术的发展和普及具有重要意义。

发明内容

本发明的目的是对虚拟现实系统中的全景视频质量进行评估，提出一种基于多层级质量因子的全景视频评估方法及系统，该系统输入一段无损全景视频和一段同样内容的损伤视频，输出损伤视频的质量评估结果，实现对损伤视频的自动评估。

本发明的思想是基于多层级的感兴趣区域计算多个质量因子，以应对全景视频中的重要区域对视频质量影响较大的问题；然后通过融合模型将多层级质量因子进行融合，模型参数可由主观数据学习得到，以应对全景视频用户的主观能动性。

本发明的目的是通过以下技术方案解决的：一种基于多层级质量因子的全景视频评估方法及系统包括一种基于多层级质量因子的全景视频评估方法及一种基于多层级质量因子的全景视频评系统。

其中，一种基于多层级质量因子的全景视频评估方法，简称本方法；一种基于多层级质量因子的全景视频评系统，简称本系统。

本系统包括全景视频输入模块、感兴趣区域提取模块、多层级质量因子计算模块、时域处理模块和多层级质量因子融合模块。

本系统各模块的连接关系如下：

全景视频输入模块与感兴趣区域提取模块相连，感兴趣区域提取模块与多层级质量因子计算模块相连；多层级质量因子计算模块和时域处理模块相连；时域处理模块和多层级质量因子融合模块相连。

本系统各模块的功能如下：

全景视频输入模块的功能是对输入的视频文件进行解码得到全景帧图像对；感兴趣区域提取模块的功能是提取全景图像的多层级感兴趣区域矩阵；多层级质量因子计算模块的功能是根据感兴趣区域矩阵计算全景图像的质量因子；时域处理模块的功能是根据全景图像的质量因子计算全景视频的质量因子；多层级质量因子融合模块的功能是将全景视频的质量因子进行融合得到损伤视频的自动评估结果。

一种基于多层级质量因子的全景视频评估方法，包括以下步骤：

步骤一：全景视频输入模块对输入本系统的一对全景视频源文件进行视频处理和解码处理，得到全景帧图像对；