[发明专利]流媒体音频融合方法和装置

说明书

本申请公开一种流媒体音频融合方法和装置，其中方法包括：基于每个待播放流媒体的资源描述信息，构建音频融合方案集合；基于所述音频融合方案集合，生成新的资源描述信息；按照基于对象的音频(object‑based audio)的音频编码方式，将所有所述流媒体的音频数据转码为一路音频数据；将所述新的资源描述信息和所述转码得到的音频数据，发送给终端的流媒体播放器播放。采用本申请可以提高多个流媒体播放场景下音频播放的灵活性、降低流媒体播放的资源开销且不依赖于终端系统平台的混音功能。

技术领域

本发明涉及流媒体播放技术，特别是涉及一种流媒体音频融合方法和装置。

背景技术

随着互联网流媒体的高速发展，用户经常同时播放多个流媒体，比如同时打开多个播放器观看不同视频，或者浏览器同一个网页中包含了多个视频内容。多个视频部分可以采用屏幕区域的分割和叠加来显示，而对音频而言，受限于的声音播放设备的唯一性，往往需要对多路音频进行混音处理后播放。

目前，终端对多路音频的混音处理的通常做法是：将各个播放器解码后的音频数据送到终端系统平台的音频部件(如声卡)进行混音处理，将混音处理结果发送给扬声器，以实现多路音频的同时播放。

申请人在实现本发明的过程中发现，上述现有的混音处理方案存在：混音处理灵活性差，解码资源开销大，依赖于终端的系统平台提供音频混音功能等问题，具体分析如下：

在现有的混音处理方案中，终端需要先对每个流媒体的音频进行解码处理，然后再基于解码结果进行混音，如此，混音处理的对象是当前播放的所有流媒体的音频，用户无法根据需要，灵活地选择哪些流媒体的音频参与混音处理，因此，存在混音处理灵活性差的问题，从而无法满足用户选择部分流媒体音频进行同时播放的需要。并且，由于在混音处理前，需要每个播放器对各自播放的流媒体的音频进行解码，因此，需要运行多个解码器进行解码，从而导致解码资源开销大的问题。

另外，由于上述方案的混音处理是由终端的系统平台实现的，因此，也需要依赖于终端的系统平台提供音频混音功能，这样，如果终端的系统平台没有提供音频混音功能，则无法利用上述方案实现混音播放效果。

发明内容

有鉴于此，本发明的主要目的在于提供一种流媒体音频融合方法和装置，可以提高音频播放的灵活性、降低流媒体播放的资源开销，且不依赖于终端系统平台的混音功能。

为了达到上述目的，本发明实施例提出的技术方案为：

一种流媒体音频融合方法，包括：

基于每个待播放流媒体的资源描述信息，构建音频融合方案集合；基于所述音频融合方案集合，生成新的资源描述信息；

按照基于对象的音频object-based audio的音频编码方式，将所有所述流媒体的音频数据转码为一路音频数据；

将所述新的资源描述信息和所述转码得到的音频数据，发送给终端的流媒体播放器播放。

本发明实施例还公开了一种流媒体音频融合装置包括：

融合配置单元，用于基于每个待播放流媒体的资源描述信息，构建音频融合方案集合；基于所述音频融合方案集合，生成新的资源描述信息；

音频融合单元，用于按照基于对象的音频object-based audio的音频编码方式，将所有所述流媒体的音频数据转码为一路音频数据；

数据发送单元，用于将所述新的资源描述信息和所述转码得到的音频数据，发送给终端的流媒体播放器播放。

本发明实施例还公开了一种流媒体音频融合设备，包括处理器和存储器；

所述存储器中存储有可被所述处理器执行的应用程序，用于使得所述处理器执行如上所述流媒体音频融合方法。