[发明专利]人体虚拟模型展示方法、装置、电子设备及存储介质有效
申请号: | 202110055323.0 | 申请日: | 2021-01-15 |
公开(公告)号: | CN112799507B | 公开(公告)日: | 2022-01-04 |
发明(设计)人: | 高阳;郝爱民;蒋孟贤;赵沁平;吴洪宇 | 申请(专利权)人: | 北京航空航天大学 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06K9/00;G06T19/00;G06T15/00 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 杜叶蕊;刘芳 |
地址: | 100191 北京市海淀区学*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 人体 虚拟 模型 展示 方法 装置 电子设备 存储 介质 | ||
1.一种人体虚拟模型展示方法,其特征在于,包括:
对获取的用户图像进行手势识别处理,得到手势识别结果;
确定所述手势识别结果对应的图像处理操作,并对预先构建的人体虚拟模型执行所述图像处理操作,获得展示的目标人体虚拟模型;
基于3D图像显示技术,对所述目标人体虚拟模型进行图像生成和图像渲染处理,获得并展示所述目标人体虚拟模型的3D图像;
所述对获取的用户图像进行手势识别处理,得到手势识别结果,包括:
根据手部关键点序列中连续图像帧的手部的关键点类型、位置以及形态,确定手部在连续图像帧中的每个手部关键点的变化趋势;
根据各手部关键点的变化趋势确定手部关键点序列所对应的手势类型和手势轨迹,得到手势识别结果;
所述确定所述手势识别结果对应的图像处理操作,并对预先构建的人体虚拟模型执行所述图像处理操作,获得待展示的目标人体虚拟模型,包括:
根据所述手势类型从函数库中调用相应类型的预存图像处理函数;
根据所述手势轨迹,对所述预存图像处理函数进行处理,得到待执行的图像处理函数;
对所述预先构建的人体虚拟模型执行所述待执行的图像处理函数,得到待展示的目标人体虚拟模型。
2.根据权利要求1所述的方法,其特征在于,所述对获取的用户图像进行手势识别处理,得到手势识别结果,包括:
确定手部在所述用户图像中的图像区域;
对所述图像区域进行手部关键点识别,得到所述图像区域中的手部关键点序列;其中,所述手部关键点序列中包括图像区域中的手部在每一图像帧的关键点类型、位置以及形态;
根据所述手部关键点序列确定其所对应的手势,得到手势识别结果。
3.根据权利要求2所述的方法,其特征在于,所述根据所述手部关键点序列确定其所对应的手势,得到手势识别结果之前,还包括:
在手部关键点序列中,确定是否有任一图像帧的关键点类型、位置以及形态满足触发条件;
若是,则执行所述根据所述手部关键点序列确定其所对应的手势,得到手势识别结果的步骤。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述基于3D图像显示技术,对所述目标人体虚拟模型进行图像生成和图像渲染处理,获得并展示所述目标人体虚拟模型的3D图像,包括:
构建多个虚拟相机,并计算每个虚拟相机的子像素映射矩阵;
利用各子像素映射矩阵,确定每个虚拟相机呈现所述目标人体虚拟模型的相机图像;
根据所述目标人体虚拟模型的模型材质,对各相机图像进行光影渲染处理,得到相应的渲染图像;
根据各渲染图像,创建所述目标人体虚拟模型的3D图像并进行展示。
5.一种人体虚拟模型展示装置,其特征在于,包括:
手势识别单元,用于对获取的用户图像进行手势识别处理,得到手势识别结果;所述手势识别结果包括:手势类型和手势轨迹;
执行单元,用于确定所述手势识别结果对应的图像处理操作,并对预先构建的人体虚拟模型执行所述图像处理操作,获得展示的目标人体虚拟模型;
展示单元,用于基于3D图像显示技术,对所述目标人体虚拟模型进行图像生成和图像渲染处理,获得并展示所述目标人体虚拟模型的3D图像;
所述执行单元,具体用于:
根据所述手势类型从函数库中调用相应类型的预存图像处理函数;
根据所述手势轨迹,对所述预存图像处理函数进行处理,得到待执行的图像处理函数;
对所述预先构建的人体虚拟模型执行所述待执行的图像处理函数,得到待展示的目标人体虚拟模型。
6.一种电子设备,其特征在于,包括:至少一个处理器和存储器;
所述存储器存储计算机执行指令;
所述至少一个处理器执行所述存储器存储的计算机执行指令,使得所述至少一个处理器执行如权利要求1-4任一项所述的方法。
7.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如权利要求1-4任一项所述的方法。
8.一种计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1-4任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京航空航天大学,未经北京航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110055323.0/1.html,转载请声明来源钻瓜专利网。