[发明专利]可拓展式三维显示远程视频通信方法

摘要

本发明公开了一种可拓展式三维显示远程视频通信方法，在数据发送端：利用RGB-D相机获取第一用户的人物图像，其包含了纹理图像和深度图像，从纹理图像中提取出面部特征信息及表情特征信息，从深度图像中提取肢体特征信息并重建出人物点云；利用人物点云对各特征信息进行优化得到优化后的特征信息并生成三维模型A，将三维模型A投影到对应的纹理图像，提取出相应的纹理信息，将采集到的语音信息连同优化后的特征信息，以及纹理数据发送给第二用户；在数据接收端：第二用户接收来自第一用户的数据后，提取其中优化后的特征信息生成三维模型B，利用纹理数据对三维模型B进行渲染，通过三维显示设备输出渲染结果，并播放所述的语音信息。

主权项

一种可拓展式三维显示远程视频通信方法，其特征在于，实施步骤如下：数据发送端：1）利用RGB‑D相机获取第一用户的人物图像，该人物图像中包含了纹理图像和深度图像；从纹理图像中提取出面部特征信息及表情特征信息；从深度图像中提取肢体特征信息并重建出人物点云；2）利用所述的人物点云对步骤1）中各特征信息进行优化得到优化后的特征信息，通过该优化后的特征信息生成三维模型A；3）将所述的三维模型A投影到对应的纹理图像，将该三维模型A所对应的纹理数据提取出来；在采集人物图像的同时获取语音信息，将该语音信息连同优化后的特征信息，以及提取出来的纹理数据发送给第二用户；4）循环操作步骤1）～3），利用后一时刻的数据对前一时刻的数据进行更新并发送给第二用户；数据接收端：第二用户通过网络接收来自第一用户的数据后，提取其中的优化后的特征信息生成三维模型B，利用所述提取出来的纹理数据对三维模型B进行渲染，通过三维显示设备输出渲染结果，并播放所述的语音信息。