[发明专利]视频复用设备和方法、复用视频解码设备和方法

权利要求书

1.一种用于对视频数据连同除了视频之外的第一媒体数据进行复用的视频复用设备，所述视频复用设备包括：

控制单元，其对于所述视频数据中的每个画面和对于所述第一媒体数据的每个编码单位，确定各自用于确定所述画面和所述编码单位的解码时间和显示时间的第一解码/显示时间信息和第二解码/显示时间信息；

视频分组生成单元，其为承载所述视频数据的编码数据的视频分组附加用于所述画面的第一解码/显示时间信息和第二解码/显示时间信息；

媒体分组生成单元，其为承载所述第一媒体数据的编码数据的媒体分组附加用于所述编码单位的第一解码/显示时间信息和第二解码/显示时间信息；

分组复用单元，其通过对所述视频分组和所述媒体分组进行复用来生成数据流，并且输出所述数据流，其中

第一解码/显示时间信息包括如下信息：所述信息指示在所述视频数据的解码单位是画面时、以同步方式显示所述视频数据和所述第一媒体数据的时间，

第二解码/显示时间信息包括如下信息：所述信息指示在所述视频数据的解码单位是通过将画面划分成多个子画面获得的子画面时、以同步方式显示所述视频数据和所述第一媒体数据的时间，以及

基于所述第二解码/显示时间信息确定的所述画面的解码时间和显示时间早于基于所述第一解码/显示时间信息确定的所述画面的解码时间和显示时间。

2.根据权利要求1所述的视频复用设备，其中，当所述视频数据的解码单位是所述子画面时，所述分组复用单元对所述视频分组和所述媒体分组进行复用，以便确保对于所述视频数据中的每个画面，与所述画面中的第一子画面对应的编码数据和与所述画面对应的第一媒体数据的编码单位的编码数据将在比基于所述第二解码/显示时间信息确定的所述画面的解码时间更早的时间或与基于所述第二解码/显示时间信息确定的所述画面的解码时间相同的时间到达用于对所述数据流进行解码的解码设备。

3.根据权利要求2所述的视频复用设备，其中，用于所述画面的第二解码/显示时间信息包括指示对所述子画面进行解码所需的子画面解码时间的信息，并且

基于所述第二解码/显示时间信息确定的所述画面的解码时间比基于所述第一解码/显示时间信息确定的所述画面的解码时间早通过从对整个画面进行解码所需的时间减去所述子画面解码时间而获得的时间量。

4.根据权利要求3所述的视频复用设备，其中，所述第二解码/显示时间信息包括指示将如下时间作为所述画面的显示时间的信息：所述时间比基于所述第二解码/显示时间信息确定的所述画面的解码时间晚对从所述画面中的第一子画面开始的两个子画面进行解码所需的时间量。

5.根据权利要求1所述的视频复用设备，其中，所述视频分组生成单元为所述视频分组附加作为所述第二解码/显示时间信息的、指示所述画面中的第一子画面的解码时间和显示时间的信息。

6.根据权利要求1所述的视频复用设备，其中，所述视频分组生成单元为所述视频分组附加作为所述第二解码/显示时间信息的、指示用于每个子画面的解码时间和显示时间的信息。