[发明专利]一种vr眼镜面部3d图像、平面图像捕获与手势捕获系统

说明书

技术领域

本发明涉及一种虚拟现实设备系统，具体地说涉及一种通过vr眼镜完成远程可视化交互的系统。

背景技术

vr虚拟现实设备的热卖由此诞生了一个问题步入两个人如何用vr设备通过图像实施互动、互传，问题在于vr设备通常设置面部导致遮挡面部难以通过外部摄像头捕捉人的面部整体图像并如何同时完成交互互动。

发明目的在于vr设备通常设置面部导致遮挡面部难以通过外部摄像头捕捉人的面部整体图像，本发明致力于解决这一问题。

一种vr眼镜面部3d图像、平面图像捕获与手势捕获系统，包括：摄像头组，vr眼镜，其特征在于：先提供一张正面头像，阵列摄像头组捕获整个面部图像，vr眼镜由于覆盖并紧贴面部，紧贴面部区域（18）画面无法获取，由此前提供的面部照片中对应部位进行补充；

vr眼镜紧贴面部区域（18）的面部接触部件颜色是绿色或蓝色二者选其一；

通过摄像头阵列组获取vr眼镜贴合面部外部边缘线（17）、内部边缘线（16），两条线确定二者之间的区域（18）轮廓，根据图片图与图的对应点包括下颌、眼睛、瞳孔、嘴巴特征点确定两个图像的位置相对应关系，其中前者是摄像头阵列组捕获的面部图像，后者是提供的正面头像图像；从后者图像中裁切前者两条线确定二者之间的区域（18）中对应在后者图像的局部区域图像，并将其补充到前者图像中，因为该区域在面部一般表情中保持静态，将此区域静态面部图像与其它部位动态视频按照位置对应关系结合，合二为一成为完成动态视频面部；

摄像头a（1）、摄像头b（10）设置于对应左眼位置的vr眼镜的内部区域，摄像头a（1）、摄像头b（10）位于透镜镜片a（6）上、下两侧设置，红外摄像头朝向眼球瞳孔位置设置，红外摄像头b（3）设置于左眼对应透镜镜片（6）边缘；

摄像头a1（2）、摄像头b2（9）设置于对应左眼位置的vr眼镜内部区域，摄像头a1（2）、摄像头b1（9）位于透镜镜片c（7）上、下两侧设置，红外摄像头朝向眼球瞳孔位置设置，红外摄像头b1（8）设置于右眼对应透镜镜片c（7）边缘；

vr眼镜下侧边框（11）紧邻边缘（5）处设置摄像头c（4）摄像头d（12），摄像头c（4）、摄像头d（12）沿左右间的中心点位置对称设置，捕获图像方向朝向面部；

vr眼镜上侧边框（15）紧邻边缘（14）处设置摄像头f（23），上侧边框（15）边缘（14）上面沿左右对称点处设置摄像头f（23），其捕获图像方向朝向面部；

以上设备根据摄像头设置在面部位置对应，拼合其捕获图像，拼接成完整面部，完成了完整面部图像的捕获，具体是：

摄像头a（1）、摄像头b（10）捕获vr眼镜内部的眼睛鼻梁区域图像，

摄像头a1（2）、摄像头b2（9）捕获vr眼镜内部的眼睛鼻梁区域图像，

红外摄像头b（3）红外摄像头b1（8）负责，

摄像头c（4）、摄像头d（12）捕获头戴vr眼镜状态下人的面部区域vr眼镜以下部位图像，

摄像头f（23）捕获额头图像，

摄像头c（4）、摄像头d（12）捕获头戴vr眼镜状态下人的面部区域vr眼镜以下部位图像，

并将摄像头c（4）、摄像头d（12）捕获头戴vr眼镜状态下人的面部区域vr眼镜以下部位图像，裁切出的对应此被覆盖部位的面部区域图像，vr眼镜贴合面部的内部边缘线（16）以内的由摄像头a（1）、摄像头b（10）捕获vr眼镜内部的眼睛鼻梁区域图像，摄像头a1（2）、摄像头b2（9）捕获vr眼镜内部的眼睛鼻梁区域图像，在拼合摄像头f（23）捕获额头图像而将以上局部动态图像拼合一体后合成完整面部图像，再计算机生成耳朵、头发以及脖子对应与面部图像进行拼接，最终合成完整头像，头像结合有计算机合成的图像部分包括头发、耳朵、脖子合成具有完全头部器官的完整头像，眼镜上设置可以测量头部旋转角度的3轴角度即位置变化捕获传感器；

最终显示到vr眼镜左眼、右眼屏幕上或显示器上，可以通过网络远程连接传送到远方的vr眼镜的左眼、右眼的屏幕；