[发明专利]投影显示方法、装置及计算机可读存储介质在审
申请号: | 202110280123.5 | 申请日: | 2021-03-16 |
公开(公告)号: | CN112672139A | 公开(公告)日: | 2021-04-16 |
发明(设计)人: | 孙世攀;张聪;胡震宇 | 申请(专利权)人: | 深圳市火乐科技发展有限公司 |
主分类号: | H04N13/366 | 分类号: | H04N13/366;H04N13/363;H04N13/106;H04N9/31;G06K9/00;G06T7/11;G06T7/194;G06T7/73 |
代理公司: | 深圳紫藤知识产权代理有限公司 44570 | 代理人: | 李新干 |
地址: | 518000 广东省深圳市南山区科技*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 投影 显示 方法 装置 计算机 可读 存储 介质 | ||
1.一种投影显示方法,其特征在于,包括:
实时获取摄像头采集的目标对象的图像;
确定目标对象的人眼在所述图像中的二维坐标信息和深度信息,将所述二维坐标信息和深度信息确定为实时人眼坐标信息;
根据所述实时人眼坐标信息确定人眼在光机对应的三维虚拟场景中的实时位置信息;
根据所述实时位置信息、所述三维虚拟场景中的三维物体的动态位置信息和所述目标对象关注的投影面,对所述三维物体进行实时透视投影运算,得到实时二维图像;
处理所述实时二维图像,得到包括所述实时二维图像有效展示内容的待显示投影图像;
将所述待显示投影图像投影显示在所述投影面上。
2.根据权利要求1所述的投影显示方法,其特征在于,所述根据所述实时人眼坐标信息确定人眼在光机对应的三维虚拟场景中的实时位置信息的步骤,包括:根据所述摄像头和光机的相对位置关系以及实时人眼坐标信息,确定人眼在光机对应的三维虚拟场景中的实时位置信息。
3.根据权利要求2所述的投影显示方法,其特征在于,所述根据所述摄像头和光机的相对位置关系以及实时人眼坐标信息,确定人眼在光机对应的三维虚拟场景中的实时位置信息的步骤,包括:
根据所述实时人眼坐标信息确定人眼在所述摄像头所在的三维坐标系中的坐标信息;
根据所述摄像头和光机的相对位置关系,将人眼的所述坐标信息转换为光机对应的三维虚拟场景中的实时位置信息。
4.根据权利要求2所述的投影显示方法,其特征在于,所述确定目标对象的人眼在所述图像中的二维坐标信息和深度信息的步骤,包括:
对所述图像进行人眼检测,以识别所述图像中的目标对象的人眼,得到人眼图像;
根据所述人眼图像在所述图像中的位置关系,确定所述人眼图像中的人眼在所述图像中的二维坐标信息;
利用第一神经网络模型对所述人眼图像进行深度识别,以得到所述人眼在所述图像中的深度信息。
5.根据权利要求4所述的投影显示方法,其特征在于,还包括:
当在所述图像中未识别出人眼时,获取在所述图像之前采集的至少一张图像和所述至少一张图像中的人眼的二维坐标信息和深度信息;
利用所述至少一张图像、所述至少一张图像中的人眼的二维坐标信息和深度信息对所述图像中的人眼的二维坐标信息和深度信息进行预测,以得到预测的二维坐标信息和深度信息;
将预测的二维坐标信息和深度信息作为人眼在所述图像中的二维坐标信息和深度信息。
6.根据权利要求1所述的投影显示方法,其特征在于,所述处理所述实时二维图像,得到包括所述实时二维图像有效展示内容的待显示投影图像的步骤,包括:
确定所述光机与投影面的位置关系,所述位置关系通过所述投影面在所在光机所在的三维坐标系下对应的平面方程来表示;
根据所述位置关系确定所述光机投影在投影面上的投影区域;
根据所述投影区域对所述实时二维图像进行裁剪,以得到包括所述实时二维图像有效展示内容的待显示投影图像。
7.根据权利要求1所述的投影显示方法,其特征在于,在所述得到包括所述实时二维图像有效展示内容的待显示投影图像的步骤之后,所述投影显示方法还包括:
将所述待显示投影图像和上一待显示投影图像分别进行灰度处理,以得到第一灰度图像和第二灰度图像;
将所述第一灰度图像和所述第二灰度图像进行相似度计算,以得到相似度值;
若所述相似度值小于预设相似度值,则根据所述上一待显示投影图像和所述待显示投影图像确定最终的待显示投影图像。
8.根据权利要求1所述的投影显示方法,其特征在于,在所述得到包括所述实时二维图像有效展示内容的待显示投影图像的步骤之后,所述投影显示方法还包括:
检测是否开启了环境光检测功能;
若是,检测环境光信息;
根据所述环境光信息调整所述待显示投影图像的亮度,以得到调整后的待显示投影图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市火乐科技发展有限公司,未经深圳市火乐科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110280123.5/1.html,转载请声明来源钻瓜专利网。