[发明专利]基于虚拟数字人的舞蹈教学交互方法、装置、设备及介质有效
申请号: | 202310806836.X | 申请日: | 2023-07-04 |
公开(公告)号: | CN116546149B | 公开(公告)日: | 2023-10-24 |
发明(设计)人: | 章动;潘孟姣;张远 | 申请(专利权)人: | 北京小糖科技有限责任公司 |
主分类号: | H04N5/268 | 分类号: | H04N5/268;G09B5/02;G06F16/783 |
代理公司: | 北京威禾知识产权代理有限公司 11838 | 代理人: | 王月玲 |
地址: | 100088 北京市海淀区花园*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 虚拟 数字 舞蹈 教学 交互 方法 装置 设备 介质 | ||
1.一种基于虚拟数字人的舞蹈教学交互方法,其特征在于,应用于终端设备,所述方法包括:
终端设备接收第一播放请求,所述第一播放请求用于令所述终端设备将当前播放的舞蹈教学视频切换至对应的反面教学视频,其中,如果当前舞蹈教学视频为正面教学视频,则对应的反面教学视频为背面教学视频,如果当前舞蹈教学视频为背面教学视频,则对应的反面教学视频为正面教学视频;
所述终端设备将所述第一播放请求发送至服务器,以使所述服务器确定视频画像库中是否存储有与当前舞蹈教学视频对应的反面教学视频,以及,确定虚拟数字人片段库中是否存储有与当前舞蹈教学视频对应的反面教学动作序列;其中,所述视频画像库用于存储正面教学视频以及对应的背面教学视频,所述虚拟数字人片段库用于存储根据舞蹈教学视频生成的反面教学动作序列;其中,所述服务器还用于在视频画像库中不存在对应的反面教学视频且虚拟数字人片段库中不存在对应的反面教学动作序列的情况下,根据当前舞蹈教学视频生成对应的反面教学动作序列并发送给所述终端设备;
所述终端设备根据接收到的反面教学动作序列,生成由虚拟数字人形象展示的反面教学视频,并播放所述反面教学视频,视频切换完成。
2.根据权利要求1所述的方法,其特征在于,在播放所述反面教学视频之前,所述方法还包括:所述终端设备根据舞蹈教学视频中的教学者的面部特征及体态特征,将虚拟数字人渲染为所述教学者的虚拟数字人形象;和/或,所述终端设备根据系统默认的面部特征及体态特征,将虚拟数字人渲染为默认的虚拟数字人形象。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
所述终端设备的播放器框架中增加形象切换按钮;当所述形象切换按钮被触发时,反面教学视频中的虚拟数字人形象在所述教学者的虚拟数字人形象与所述默认的虚拟数字人形象之间切换。
4.根据权利要求1所述的方法,其特征在于,所述虚拟数字人片段库中存储的反面教学动作序列包括:存量视频对应的反面教学动作序列和增量视频对应的反面教学动作序列,所述存量视频对应的反面教学动作序列通过离线处理生成,所述增量视频对应的反面教学动作序列通过在线处理生成。
5.一种基于虚拟数字人的舞蹈教学交互方法,其特征在于,应用于服务器,所述方法包括:
服务器接收终端设备发送的第一播放请求,所述第一播放请求用于令所述终端设备将当前播放的舞蹈教学视频切换至对应的反面教学视频,其中,如果当前舞蹈教学视频为正面教学视频,则对应的反面教学视频为背面教学视频,如果当前舞蹈教学视频为背面教学视频,则对应的反面教学视频为正面教学视频;
响应于所述第一播放请求,所述服务器确定视频画像库中是否存储有与当前舞蹈教学视频对应的反面教学视频,以及,确定虚拟数字人片段库中是否存储有与当前舞蹈教学视频对应的反面教学动作序列;其中,所述视频画像库用于存储正面教学视频以及对应的背面教学视频,所述虚拟数字人片段库用于存储根据舞蹈教学视频生成的反面教学动作序列;
在视频画像库中不存在对应的反面教学视频且虚拟数字人片段库中不存在对应的反面教学动作序列的情况下,所述服务器根据当前舞蹈教学视频生成对应的反面教学动作序列并发送给终端设备,以使得所述终端设备根据接收到的反面教学动作序列,生成由虚拟数字人形象展示的反面教学视频,并播放所述反面教学视频,视频切换完成。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
当所述视频画像库中存储有对应的反面教学视频时,所述服务器将所述反面教学视频发送到终端设备。
7.根据权利要求5所述的方法,其特征在于,所述方法还包括:
当所述虚拟数字人片段库中存储有对应的反面教学动作序列时,所述服务器将所述反面教学动作序列发送至终端设备。
8.根据权利要求5所述的方法,其特征在于,所述方法还包括:
所述服务器将舞蹈教学视频中的教学者的面部特征及体态特征信息下发至终端设备,以使得终端设备根据所述教学者的面部特征及体态特征对虚拟数字人进行渲染。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京小糖科技有限责任公司,未经北京小糖科技有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310806836.X/1.html,转载请声明来源钻瓜专利网。