[发明专利]发送多媒体数据、播放多媒体数据的方法、装置及系统

权利要求书

1.一种发送多媒体数据的方法，其特征在于，所述方法应用于发送设备，所述方法包括：

获取N个通道中的每个通道的多媒体数据流，所述每个通道的多媒体数据流包括至少一个多媒体帧，N为大于1的整数；

将所述N个通道的多媒体数据流合成为一路数据流，所述数据流包括至少一个合成帧，所述合成帧包括N个时间戳均相同的多媒体帧及其参数信息和所述合成帧的参数信息，其中，N个多媒体帧分别属于所述N个通道，所述合成帧的参数信息包括所述合成帧中的多媒体帧数目N、多媒体帧的宽高、分辨率、时间戳和帧类型，所述多媒体帧的参数信息包括所述多媒体帧的数据长度、所述多媒体帧所在通道的通道标识、时间戳、持续时间；

根据所述每个通道对应的摄像头的角度信息、通道信息和合成分辨率，生成所述数据流的配置信息；向播放设备发送所述数据流，并在所述播放设备中播放所述数据流，所述数据流中包括所述数据流的配置信息；

当所述N个多媒体帧均为视频帧时，所述数据流的配置信息还包括所述每个通道对应的描述结构体，所述描述结构体为类数据结构；所述发送所述数据流之前，还包括：

生成所述每个通道对应的描述结构体，通道对应的描述结构体包括所述通道的通道标识、用于播放所述通道的媒体数据流的播放区域的位置信息和尺寸信息；

所述播放设备用于对所述数据流中包括的至少一个合成帧中的每个合成帧进行解析，得到所述每个合成帧对应的多媒体帧集合和所述数据流的配置信息，合成帧对应的多媒体帧集合包括所述合成帧的参数信息、所述合成帧中的每个多媒体帧和所述每个多媒体帧的参数信息；

所述播放设备用于当多媒体帧为视频帧时，获取所述播放设备支持的至少一个硬解码方式，所述播放设备的不同操作系统所支持的硬解码方式不同；根据任一多媒体帧集合中包括的合成帧的参数信息、每个多媒体帧的参数信息和所述数据流的配置信息，并分别采用所述至少一个硬解码方式中的每个硬解码方式解码所述任一多媒体帧集合包括的至少一个多媒体帧，并确定所述每个硬解码方式的解码效率；根据所述每个硬解码方式的解码效率，从所述每个硬解码方式中选择一硬解码方式；根据解析的每个多媒体帧集合中包括的合成帧的参数信息、每个多媒体帧的参数信息和所述数据流的配置信息，并采用所述硬解码方式解码所述每个多媒体帧集合包括的每个多媒体帧；播放所述解码的每个多媒体帧。

2.如权利要求1所述的方法，其特征在于，所述将所述N个通道的多媒体数据流合成为一路数据流，包括：

分别从所述每个通道的多媒体数据流中获取一个多媒体帧，得到N个多媒体帧，所述N个多媒体帧中的每个多媒体帧对应的时间戳均相同；

生成合成帧，所述合成帧包括所述N个多媒体帧和所述N个多媒体帧的参数信息，所述合成帧的帧头包括所述合成帧的参数信息，在所述合成帧中，每个多媒体帧和所述多媒体帧的参数信息相邻，且所述多媒体帧的参数信息的位置比所述多媒体帧的位置更靠近所述合成帧的帧头；

将生成的各合成帧组成数据流。

3.如权利要求1所述的方法，其特征在于，所述生成所述每个通道对应的描述结构体，包括：

获取预先设置的或输入的通道的通道标识、用于播放所述通道的媒体数据流的播放区域的位置信息、尺寸信息；

根据所述通道标识、所述位置信息和所述尺寸信息生成所述通道对应的描述结构体。