[发明专利]混音处理方法及系统

权利要求书

1.一种混音处理方法，其特征在于，包括步骤：

分别获取各个客户端的音频信息，所述音频信息为语音信息、音乐信息或语音音乐信息，其中，所述语音音乐信息为同一个客户端同时接收的语音信息和音乐信息的混音；

分别将各个客户端对应的音频信息进行编码，获得音频编码帧；

在所述音频编码帧前设置标志位，获得扩展音频编码帧；其中，若所述音频信息为语音信息，则所述标志位为语音标志位，若所述音频信息为音乐信息，则所述标志位为音乐标志位，若所述音频信息为语音音乐信息，则所述标志位为音乐标志位；

将所述扩展音频编码帧打包后发送至混音服务器；

获取解包后的所述混音服务器的扩展音频编码帧；

根据所述扩展音频编码帧的标志位将所述音频编码帧进行解码获得音频解码信息，将所述音频解码信息进行混音获得混音音频信息，并将混音音频信息返回至各个客户端。

2.根据权利要求1所述的混音处理方法，其特征在于，

所述在所述音频编码帧前设置标志位，获得扩展音频编码帧步骤，还包括步骤：在所述音频编码帧前设置语音特征位，其中，若所述音频信息为语音信息，计算所述语音信息的语音特征值，则所述语音特征位为语音特征值；

所述根据所述扩展音频编码帧的标志位将所述音频编码帧进行解码获得音频解码信息，将所述音频解码信息进行混音获得混音音频信息，并将混音音频信息返回至各个客户端步骤，包括步骤：

若所述标志位为语音标志位，则根据所述扩展音频编码帧的语音特征值与预设的混音优先级判定规则确定参与混音的音频编码帧，将所述参与混音的音频编码帧进行解码获得音频解码信息；

若所述标志位为音乐标志位，则将所述音频编码帧进行解码获得音频解码信息；

将各所述音频解码信息进行混音获得混音音频信息，并将混音音频信息返回至各个客户端。

3.根据权利要求1所述的混音处理方法，其特征在于，

所述在所述音频编码帧前设置标志位，获得扩展音频编码帧步骤，还包括步骤：在所述音频编码帧前设置语音特征位，其中，若所述音频信息为语音信息，计算所述语音信息的语音特征值，则所述语音特征位为语音特征值；

所述获取解包后的所述混音服务器的扩展音频编码帧；根据所述扩展音频编码帧的标志位将所述音频编码帧进行解码获得音频解码信息，将所述音频解码信息进行混音获得混音音频信息，并将混音音频信息返回至各个客户端步骤，包括步骤：

获取所述混音服务器接收的数据包，根据数据包的IP地址判断数据包来源；

当所述数据包来自客户端时，解析数据包获得解析扩展音频编码帧，解析扩展音频编码帧的标志位，若所述标志位为语音标识位时，读取所述扩展音频编码帧的语音特征值；根据所述语音特征值与第一预设的混音优先级判定规则确定参与混音的音频编码帧，将该音频编码帧解码，若所述标志位为音乐标志位，则将所述音频编码帧进行解码，根据各解码音频信息获得初选音频信息，发送所述初选音频信息和对应的标识位、语音特征值；

当所述数据包来自主混音服务器时，将所述数据包转发至客户端；

获取主混音服务器接收的初选音频信息、标志位、语音特征值，根据所述语音特征值与第二预设的混音优先级判定规则确定参与混音的音频信息，根据参与混音的音频信息和音乐标志位对应的音频信息获得终选音频信息，

将终选音频信息混音、编码并封包发送至各子混音服务器。

4.根据权利要求3所述的混音处理方法，其特征在于，

所述将终选音频信息混音、编码并封包发送至各子混音服务器步骤，包括步骤：

将转发标志位和所述终选音频信息以及对应的标志位和语音特征值封包发送至有客户端参与混音的子混音服务器，将所述终选音频信息混音并编码，将混音标志位和该编码信息封包发送至没有客户端参与混音的子服务端；

所述当所述数据包来自主混音服务器时，将所述数据包转发至客户端步骤，包括步骤：

读取所述数据包的转发/混音标志位，若为混音标识位时，将数据包转发至对应客户端；若为转发标志位时，根据被发送客户端对所述数据包的终选音频信息以及对应的标志位和语音特征值进行混音并编码，将编码后数据发送至对应客户端。