[发明专利]使用神经网络确定图像中的结构和运动

摘要

一种系统包括编码器神经网络、场景结构解码器神经网络和运动解码器神经网络。编码器神经网络被配置为：接收第一图像和第二图像；并处理第一图像和第二图像以生成第一图像和第二图像的编码表示。场景结构解码器神经网络被配置为处理编码表示以生成表征第一图像中描绘的场景的结构的结构输出。运动解码器神经网络被配置为处理编码表示以生成表征第一图像与第二图像之间的运动的运动输出。

主权项

1.一种系统，包括一个或多个计算机和存储指令的一个或多个存储设备，所述指令在由所述一个或多个计算机执行时使得所述一个或多个计算机实施：编码器神经网络，被配置为：接收第一图像和第二图像，以及处理第一图像和第二图像以生成第一图像和第二图像的编码表示；场景结构解码器神经网络，被配置为：处理所述编码表示以生成表征第一图像中描绘的场景的结构的结构输出；以及运动解码器神经网络，被配置为：处理所述编码表示以生成表征第一图像与第二图像之间的运动的运动输出。