[发明专利]利用灵活宏块排序对任意数目的源流进行视频合成

权利要求书

1.一种视频合成方法，包括：

由合成器接收多个即N个遵循H.264的源视频流，其中，N是大于1 的整数；

利用灵活宏块排序FMO将所述N个源视频流中的每个源视频流转换 为源片段组；

将垫料片段组添加到所述源片段组以创建遵循H.264/AVC标准的合成 图像，其中从源视频流合成影像的顺序行进基于具有在合成操作所对应的 时间间隔内的呈现时间的影像，其中所述垫料片段组被添加以创建与输出 显示格式相符的矩形合成影像大小，并且其中利用容易将垫料片段组标识 为垫料区域的不同图案来强调所述垫料片段组；并且

创建包括伸缩参数的影像参数集PPS，所述伸缩参数被附加到所述片 段组中的每个片段组，并且所述伸缩参数包括指示解码器将所述片段组伸 缩为产生矩形合成图像的格式的呈现信息；并且

将所述源片段组和垫料片段组重新排序为单个合成输出流。

2.如权利要求1所述的方法，其中，所述遵循H.264的源视频流中的 每个源视频流具有不同的影像配置属性。

3.如权利要求1所述的方法，其中，所述多个遵循H.264的源视频流 包括至少一个H.264/SVC流。

4.如权利要求1所述的方法，其中，所述多个遵循H.264的源视频流 包括一个或多个H.264/AVC流以及一个或多个H.264/SVC流。

5.如权利要求1所述的方法，其中，所述合成图像具有矩形形状，并 且包括所述源视频流中的每个源视频流的源图像。

6.如权利要求1所述的方法，其中，所述合成图像具有矩形形状，并 且具有比任何源图像的大小大的大小。

7.如权利要求1所述的方法，还包括：从所述源视频流中的每个源视 频流中去除H.264头部信息。

8.如权利要求1所述的方法，其中，所述重新排序是利用任意片段排 序ASO实现的。

9.如权利要求1所述的方法，还包括：由解码器将所述合成图像呈现 为包括由所述垫料片段组定义的一个或多个垫料区域的大的矩形影像。

10.如权利要求5所述的方法，还包括：利用一图案来强调所述垫料 片段组，所述图案将所述垫料片段组标识为所述源图像的填料。

11.如权利要求5所述的方法，还包括：

由解码器接收所述单个合成输出流；

识别所述垫料片段组；

选择所述源图像，并且：

分别显示所述源图像中的每个源图像，或者

将所述源图像布置为另一显示格式。

12.一种视频合成设备，包括：

用于接收多个即N个源视频流的装置，其中，N是大于1的整数，所 述源视频流中的至少两个源视频流具有不同的配置属性；

用于利用灵活宏块排序FMO将所述N个源视频流中的每个源视频流 转换为源片段组的装置；

用于将垫料片段组添加到所述源片段组以创建合成图像的装置，其中 从源视频流合成影像的顺序行进基于具有在合成操作所对应的时间间隔内 的呈现时间的影像，其中所述垫料片段组被添加以创建与输出显示格式相 符的矩形合成影像大小，并且其中利用容易将垫料片段组标识为垫料区域 的不同图案来强调所述垫料片段组；以及

用于创建包括伸缩参数的影像参数集PPS的装置，所述伸缩参数被附 加到所述片段组中的每个片段组，并且所述伸缩参数包括指示解码器将所 述片段组伸缩为产生矩形合成图像的格式的呈现信息；以及

用于利用任意片段排序ASO将所述源片段组和垫料片段组重新排序 为单个合成输出流的装置。

13.如权利要求12所述的设备，其中，所述合成图像具有遵循H.264 标准的格式。

14.如权利要求12所述的设备，其中，所述合成图像具有矩形形状， 并且包括所述源视频流中的每个源视频流的源图像。