[发明专利]一种音视频在线检测与虚拟声像生成方法及装置

权利要求书

1.一种音视频在线检测与虚拟声像生成方法，其特征在于，包括：

获取影视作品，提取所述影视作品的视频以及多声道音频；

对所述视频以及所述多声道音频进行多声道音视频在线检测，得到声音特征参数的标注文件；

利用所述多声道音频以及所述声音特征参数的标注文件生成多声道音频文件，并利用所述多声道音频文件生成多声道音频信号，对所述多声道音频信号进行信号矩阵分配，得到分配结果；

从所述声音特征参数的标注文件中提取运动声源的运动轨迹以及运动时间，并将所述运动声源的运动轨迹以及运动时间代入运动声源运动速率感知模型，从所述声音特征参数的标注文件中提取声学参数，并将所述声学参数代入三维声源距离感知模型，利用所述运动声源运动速率感知模型以及所述三维声源距离感知模型获得运动声源运动过程中所需声道以及相应声道中的声学参数；

利用所述分配结果以及所述运动声源运动过程中所需声道以及相应声道中的声学参数进行虚拟声像的生成；

其中：

在设置在影院的重放系统包括四层时，从上至下分别为顶层、高度层、水平层和地层；依次为设置在天花板的扬声器矩阵、设置在墙体高处的扬声器矩阵，以及设置在墙体位于听众耳朵高度的扬声器矩阵以及设置在地面的扬声器矩阵；

所述将所述多声道音频信号进行信号矩阵分配，得到分配结果包括：

将所述多声道音频信号进行信号矩阵分配，并在分配后，对预设部分信号采用子带随机延时去相关处理，得到分配结果。

2.根据权利要求1所述的方法，其特征在于，在所述虚拟声像的生成后，还包括：利用多声道系统进行所述虚拟声像的重放。

3.根据权利要求1所述的方法，其特征在于，所述声音特征参数的标注文件包括：运动声源的声音特征参数的标注文件。

4.根据权利要求1或3所述的方法，其特征在于，所述声学参数包括：声压级、声源角度和频率谱。

5.一种音视频在线检测与虚拟声像生成装置，其特征在于，包括：

提取模块，用于获取影视作品，提取所述影视作品的视频以及多声道音频；

在线检测模块，用于对所述视频以及所述多声道音频进行多声道音视频在线检测，得到声音特征参数的标注文件；

多声道音频处理模块，用于利用所述多声道音频以及所述声音特征参数的标注文件生成多声道音频文件，并利用所述多声道音频文件生成多声道音频信号，对所述多声道音频信号进行信号矩阵分配，得到分配结果；

模型处理模块，用于从所述声音特征参数的标注文件中提取运动声源的运动轨迹以及运动时间，并将所述运动声源的运动轨迹以及运动时间代入运动声源运动速率感知模型，从所述声音特征参数的标注文件中提取声学参数，并将所述声学参数代入三维声源距离感知模型，利用所述运动声源运动速率感知模型以及所述三维声源距离感知模型获得运动声源运动过程中所需声道以及相应声道中的声学参数；

生成模块，用于利用所述分配结果以及所述运动声源运动过程中所需声道以及相应声道中的声学参数进行虚拟声像的生成；

其中：

在设置在影院的重放系统包括四层时，从上至下分别为顶层、高度层、水平层和地层；依次为设置在天花板的扬声器矩阵、设置在墙体高处的扬声器矩阵，以及设置在墙体位于听众耳朵高度的扬声器矩阵以及设置在地面的扬声器矩阵；

所述多声道音频处理模块通过如下方式将所述多声道音频信号进行信号矩阵分配，得到分配结果：

所述多声道音频处理模块，具体用于将所述多声道音频信号进行信号矩阵分配，并在分配后，对预设部分信号采用子带随机延时去相关处理，得到分配结果。

6.根据权利要求5所述的装置，其特征在于，还包括：重放模块；

所述重放模块，用于在所述生成模块进行虚拟声像的生成后，利用多声道系统进行所述虚拟声像的重放。

7.根据权利要求5所述的装置，其特征在于，所述声音特征参数的标注文件包括：运动声源的声音特征参数的标注文件。

8.根据权利要求5或7所述的装置，其特征在于，所述声学参数包括：声压级、声源角度和频率谱。