[发明专利]生成用于训练非接触模型的生理逼真化身以恢复生理特性

权利要求书

1.一种用于生成包含生理逼真化身的视频序列的方法，所述方法包括：

接收针对化身的反照率；

基于与生理特性相关联的生理数据修改与所述反照率相关联的次表面皮肤颜色；

基于所述反照率和经修改的所述次表面皮肤颜色渲染化身；以及

合成视频的帧，所述视频的帧包含所述化身。

2.根据权利要求1所述的方法，其中所述生理数据随时间变化，所述方法还包括：

在第一时间基于所述生理数据修改与所述反照率相关联的所述次表面皮肤颜色；

在所述第一时间基于所述反照率和与所述生理数据相关联的经修改的所述次表面皮肤颜色渲染所述化身；

合成视频的第一帧，所述视频的第一帧包含在所述第一时间基于所述反照率和与所述生理数据相关联的经修改的所述次表面皮肤颜色而被渲染的所述化身；

在第二时间基于所述生理数据修改与所述反照率相关联的所述次表面皮肤颜色；

在所述第二时间基于所述反照率和与所述生理数据相关联的经修改的所述次表面皮肤颜色渲染所述化身；以及

合成视频的第二帧，所述视频的第二帧包含在所述第二时间基于所述反照率和与所述生理数据相关联的经修改的所述次表面皮肤颜色而被渲染的所述化身。

3.根据权利要求1所述的方法，还包括：

用特定于所述生理数据的加权因子修改所述生理数据；以及

用经修改的所述生理数据修改与所述反照率相关联的所述次表面皮肤。

4.根据权利要求3所述的方法，还包括基于特定于所述生理数据的所述加权因子改变针对所述多个颜色通道中的一个或多个颜色通道的次表面半径。

5.根据权利要求1所述的方法，还包括用包含所述化身的多个合成的帧训练机器学习模型。

6.根据权利要求5所述的方法，还包括用包含人类受试者的多个视频训练所述机器学习模型。

7.根据权利要求6所述的方法，还包括：

接收描绘人类受试者的多个视频帧；以及

基于经训练的所述机器学习模型恢复生理信号。

8.根据权利要求1所述的方法，其中所述视频的帧包含动态背景前的所述化身。

9.根据权利要求1所述的方法，还包括：

从请求实体接收所述生理数据；

基本实时地合成包含所述化身的所述视频的帧；以及

向所述请求实体提供所述视频的帧。

10.根据权利要求1所述的方法，其中所述生理特性是血量脉搏。

11.根据权利要求1所述的方法，还包括用特定于所述生理特性的训练标签标记包含所述合成的视频的帧的视频片段。

12.一种用于使用包含生理逼真化身的视频序列训练机器学习模型的系统，所述系统包括：

处理器；以及

存储指令的存储器，所述指令在由所述处理器执行时，使所述处理器：

从请求实体接收请求以训练机器学习模型来检测生理特性；

接收多个视频片段，其中所述视频片段中的一个或多个视频片段包含用所述生理特性生成的合成生理逼真化身；

用所述多个视频片段训练所述机器学习模型；以及

向所述请求实体提供经训练的模型。

13.根据权利要求12所述的系统，还包括指令，所述指令在由所述处理器执行时，使所述处理器：

接收第二多个视频片段，其中包含在所述第二多个视频片段中的一个或多个视频片段描绘具有所述生理特性的人类；以及

用所述多个视频片段和所述第二多个视频片段训练所述机器学习模型。

14.根据权利要求12所述的系统，其中所述生理特性是血量脉搏。

15.根据权利要求12所述的系统，其中所述多个视频片段中的一个或多个视频片段基于所述生理特性而被训练标签标记。