[发明专利]实况视频的实时照片修饰

说明书

技术领域

要求保护的主题一般地涉及图像修改，更具体而言，涉及对实况视频图像的动态修饰。

背景技术

对数字图像操纵以使图像更有吸引力在广告和娱乐领域是众所周知的。人面部和身体通常是这样的“照片修饰”或简单“修饰”的目标。尽管修饰曾经是专门地由专业人员或“修饰美工”执行的，但是，该过程近年已经变得自动化并由计算设备执行。这样的自动化照片修饰可以是传统的化妆、发型和照明专家的补充或替代品。

在计算系统中，可以根据特定“拟合”准则（诸如，但不限于，有关尺寸和颜色的规则），自动地检测、测量和修改面部。在视频图像的情况下，多个帧可能需要修改，以使变化在特定帧序列中的连续多帧中保持一致。

发明内容

提供了用于执行下列操作的技术：处理多个视频帧的子集以产生所述子集的每个帧内的特定元素的3D模型；处理所述多个视频帧以识别所述多个帧中的每个帧中的所述特定元素内的特定特征，其中，所述特定特征看起来产生所述元素的多个实例，所述多个实例中的每个实例与所述多个帧中的对应帧相关联；根据用户定义的参数并依照所述3D模型来修改所述多个实例中的每个实例，以生成多个修改的实例；以及将所述多个实例中的每个实例替换为所述多个帧中的所述对应帧中的对应的修改的实例，以产生修改的视频文件。

此发明内容并不是要作为要求保护的主题的全面描述，相反，而是要提供与其相关联的某些功能的简短概述。本领域技术人员在查阅了下面的详细描述和附图之后，要求保护的主题的其他系统、方法、功能、特征以及优点将显而易见变得显而易见。

附图说明

当结合下面的附图考虑公开的实施例的下面的详细描述时可以获得对要求保护的主题的更好的理解，在附图中：

图1是可以实现要求保护的主题的视频捕捉和编辑架构（Video Capture and Editing，VCEA）。

图2是可以实现要求保护的主题的自动照片修饰系统（Automatic Photograph Retouching System，APRS）的框图。

图3是可以实现要求保护的主题的各方面的“修改视频”过程的流程图的示例。

图4是可以实现要求保护的主题的各方面的“对帧建模”过程的流程图的示例。

图5是根据要求保护的主题可以被分析和修改的视频帧的一个示例。

图6是基于图5中首先引入的视频帧在根据要求保护的主题的修改之后的修改的视频帧。

具体实施方式

所属技术领域的技术人员知道，本发明的各个方面可以实现为系统、方法或计算机程序产品。因此，本发明的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式（包括固件、驻留软件、微代码等），或硬件和软件方面结合的实施方式，这里可以统称为电路、模块或系统。此外，在一些实施例中，本发明的各个方面还可以实现为在一个或多个计算机可读介质中的计算机程序产品的形式，该计算机可读介质中包含计算机可读的程序代码。

可以采用一个或多个计算机可读介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子（非穷举的列表）包括：具有一个或多个导线的电连接、便携式计算机盘、硬盘、随机存取存储器（RAM）、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括——但不限于——电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于——无线、有线、光缆、RF等等，或者上述的任意合适的组合。