[发明专利]一种流媒体数据传输装置、方法和系统

说明书

本发明涉及流媒体技术，尤其涉及一种流媒体数据传输装置、方法和系统，用以解决客户端等待更高码率的分片，解码时延长的问题。本发明实施例提供的一种客户端包括：第一处理模块，用于判断服务器是否下发相同内容、不同码率的多个分片；第二处理模块，用于在所述第一处理模块判断出所述服务器下发相同内容、不同码率的多个分片时，判断所述服务器优先发送高码率的分片，还是优先发送低码率的分片。其中，由于客户端在判断出服务器优先发送高码率的分片时，无需再等待服务器下发更高码率的分片，而直接对接收的分片解码，因而缩短了客户端解码的时延。

技术领域

本发明涉及流媒体技术，尤其涉及一种流媒体数据传输装置、方法和系统。

背景技术

采用传统流媒体技术中，传输的流媒体数据需要经过防火墙，且需要专业的媒体服务器支撑，实现复杂。因此出现了通过互联网传输流媒体数据的互联网流媒体技术，其不对现有互联网体系提出额外的要求，可通过对媒体文件的存储、信息描述方式进行修改，使得通过现有的HTTP协议传输流媒体数据。

移动图像专家组(Moving Pictures Experts Group，MPEG)制定的动态自适应流媒体(Dynamic Adaptive Streaming，DASH)标准，简称MPEG DASH标准，提供了采用互联网流媒体技术传输流媒体数据的标准化方案。

MPEG DASH标准定义的媒体展现描述(Media Presentation Description，MPD)的层次结构模型如图1所示。

该层次结构模型中，时段(Period)用于描述可播放一段时间的媒体内容，次序相邻的时段描述的媒体内容在时间上是连续的。一个时段包含多个适配集合(AdaptationSet)，每个适配集合描述适配多个码率的媒体内容，每个码率对应一个呈现(Representation)。呈现描述媒体内容的具体封装格式、码率、编解码参数等信息。一个呈现包含多个分片(Segment)的统一资源定位器(Uniform Resoure Locator，URL)，用于指示对应的分片的存储位置，分片包含具体的媒体内容，即音频、视频、字幕、复用的音频和视频等。

基于上述MPEG DASH标准，通过互联网传输流媒体数据的可选方案是：首先建立WebSocket双向连接，通过WebSocket文本帧传输MPEG DASH控制信息，通过WebSocket二进制帧传输分片。

图1所示的框架下客户端展现媒体内容的过程参见图2，在图1所示的框架下客户端展现媒体内容的过程包括如下步骤：

S201：客户端向服务器发送OpenMedia消息，通过在消息中携带MPD的URL地址，指示需要播放的媒体；

S202：服务器向客户端发送MediaInfo消息，告知客户端媒体的信息，比如：媒体是否已经就绪；

S203：客户端向服务器发送StartStream消息，请求服务器下发媒体；

S204：服务器向客户端发送StreamInfo消息，告知客户端媒体流的信息；

S205：服务器开始下发媒体分片。

客户端向服务器请求启动播放媒体后，服务器可通过图2中的步骤S204，在向客户端发送StreamInfo消息中，携带用于指示服务器是否会下发相同内容、不同码率的多个流的指示信息multipleRepresentation，若通过该指示信息指示服务器会下发相同内容、不同码率的多个流，则服务器在发送分片时，会向客户端同时发送多个相同内容、不同码率的首个分片。

上述过程涉及的OpenMedia消息、MediaInfo消息、StartStream消息和StreamInfo消息可视为针对MPEG DASH协议在WebSocket协议上扩展的消息，在WebSocket的文本帧传输。