[发明专利]用于混合第一视频信号和第二视频信号的方法和装置

说明书

技术领域

本发明涉及视频处理领域。具体地说，本发明涉及混合视频信号领域。

背景技术

多个已知的多媒体编辑工具提供某种形式的视频叠加功能。这些功能允许用户在视频上叠加文本，在视频上叠加图片，在视频上叠加照片，在视频上叠加视频(PIP)，或者在视频上叠加图形。

已知解决方案使用分层方法，其中不同多媒体格式在层中的彼此之上出现。对生成的视频编码之后，各层不再单独可用。当需要不同摄像机角度以实现立体声或多视图3D时，需要生成一个或多个不同视频流，并且需要将生成的视频编码为一个视频。

发明内容

本发明实施例的一个目标是克服上述某些缺点。

根据本发明的一个方面，提供一种用于混合第一视频信号和第二视频信号的方法，所述方法包括在混合设备处：接收所述第一视频信号；接收所述第二视频信号；接收转换信息信号，其将所述第一视频信号分为透明区域和非透明区域，并且表示所述第一视频信号和所述第二视频信号之间的空间关系；根据所述转换信息信号，转换所述第二视频信号；以及组合所述第一视频信号的所述非透明区域与所述转换的第二视频信号的部分，所述转换的第二视频信号的所述部分在所述第一视频信号的所述透明区域中呈现。

本发明的一个优势是通过保留所述第一视频信号和所述第二视频信号之间的所述空间关系，使混合视频信号变成可能。因此，所述生成的混合视频看起来更自然，因为将根据所述第一视频信号的修改适当转换所述混入的第二视频信号，所述修改例如包括全景、倾斜和缩放转换、投影、反射、旋转(用于滚动和偏转)，以及所述摄像机位置的更改。

在根据本发明的方法的实施例中，所述转换包括以下一个或多个：缩放、剪切、旋转、反射、投影，以及转化所述第一视频流。

本实施例的一个优势是可以将在主要视频流中发生的最常见转换应用于所述辅助视频流。

在实施例中，根据本发明的方法进一步包括接收与所述转换信息信号关联的第一深度信息，并且根据所述第一深度信息在三维空间中执行所述转换。

在实施例中，根据本发明的方法进一步包括接收与所述第二视频信号关联的第二深度信息，并且根据所述第二深度信息在三维空间中执行所述转换。

这些实施例的一个优势是所述混合所述视频信号变得甚至更自然，因为所述第二视频信号的所述对象将在所述表示的三维空间中表现一致—即使所述生成的混合视频被表示为二维视频信号。可以根据与所述第二视频信号关联的深度信息和/或与所述转换信息信号关联的深度信息，执行所述3D转换。例如，即使所述第二视频信号作为二维信号提供(无深度信息)，它也仍然可以根据与所述转换信息关联的所述深度信息在三维空间中转换。

在实施例中，根据本发明的方法进一步包括接收与所述第一视频信号关联的第三深度信息。

本实施例的一个优势是所述混合所述视频信号变得甚至更自然，因为所述第二视频信号的所述对象将在所述表示的三维空间中表现一致，这也可以以三维呈现。

在根据本发明的方法的实施例中，所述第一视频信号和所述转换信息信号作为编码视频流的不同通道接收。

本实施例的一个优势是标准化多通道编码格式可以用于所述传输具有固有混合能力的视频流。本实施例的进一步优势是简化所述主通道(所述第一视频信号)和所述混合通道(所述转换信息信号)之间的时间同步。

根据本发明的一个方面，提供一种包括软件装置的计算机程序，所述软件装置被配置为当执行时，执行如上所述的方法。

根据本发明的一个方面，提供一种用于混合第一视频信号和第二视频信号的装置，所述装置包括：第一视频输入接口，其用于接收所述第一视频信号；第二视频输入接口，其用于接收所述第二视频信号；转换信息接口，其用于接收转换信息信号，所述转换信息信号将所述第一视频信号分为透明区域和非透明区域，并且表示所述第一视频信号和所述第二视频信号之间的空间关系；转换处理器，其在操作上耦合到所述第二视频输入接口和所述转换信息接口，所述转换处理器被配置为根据所述转换信息信号，转换所述第二视频信号；以及混合处理器，其在操作上耦合到所述第一视频接口和所述转换处理器，所述混合处理器被配置为组合所述第一视频信号的所述非透明区域与所述转换的第二视频信号的部分，所述转换的第二视频信号的所述部分在所述第一视频信号的所述透明区域中呈现。

在根据本发明的装置的实施例中，所述转换处理器被配置为应用以下一个或多个：缩放、剪切、旋转、反射、投影，以及转化所述第二视频信号。