[发明专利]基于AI人工智能技术的元宇宙虚拟人图书自动播报方法在审
申请号: | 202211440070.X | 申请日: | 2022-11-17 |
公开(公告)号: | CN116129860A | 公开(公告)日: | 2023-05-16 |
发明(设计)人: | 邵丹;孙明 | 申请(专利权)人: | 中图云创智能科技(北京)有限公司 |
主分类号: | G10L13/02 | 分类号: | G10L13/02;G10L13/08;G06V30/18;G06V30/413;G06V30/10;G06F16/732;G06F16/738;G06F16/78;G06T13/40;G06F16/35;G06F40/30 |
代理公司: | 四川恒靠谱知识产权代理事务所(特殊普通合伙) 51335 | 代理人: | 杨丹 |
地址: | 100020 北京市朝阳*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 ai 人工智能 技术 宇宙 虚拟 图书 自动 播报 方法 | ||
1.基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,包括以下步骤:
S1.图书对象识别:按照图书的页面,通过摄像头选取图书中的完整页面或某一章节的篇幅,摄像头所拍摄的图像和文字信息传输至计算机,将图书中选取的图像和文字进行识别,且计算机连接大数据库,图书还包括电子书;
S2.文字语音转换:经计算机中的光学字符识别技术识别图书中文字,得到的文字文本通过文字语音转换技术转成语音信息,而电子书中的文字文本直接通过文字语音转换技术转成语音信息;
S3.语音信息处理:文字转换后得到的语音信息数据传输到计算机的处理器,计算机的处理器将语音信息数据按照特定情绪的词条处理划分;
S4.图像情感拾取:图像拾取后依据图书中内容在适当的时候播放,并在虚拟空间中进行展示;
S5.元宇宙虚拟人物形象建立:通过模型重建方法,虚拟人会通过扫描生成和三维建模的方式制作生成,得到虚拟人物模型;
S6.对照待播报内容:人脸面部信息尤其是情绪信息预先设置好并放在虚拟人表情动画库中,图书中的文字通过AI引擎识别情绪并分类,然后和表情动画库中的预设情绪动画做匹配;
S7.播报信息传输:人脸面部表情信息尤其是情绪信息与语音信息输入到元宇宙虚拟人的系统中,虚拟人在播报时会体现情绪;
S8.元宇宙虚拟人播报:元宇宙虚拟人接收到播报指令后,根据图书中的文字播报语音内容;
S9.播报检阅:元宇宙虚拟人播报语音内容后,内容管理员听取播报内容,如对播报内容的语音音调或宇宙虚拟人播报表情不满意,重新选取语音音调或宇宙虚拟人播报表情,并对语音音调或宇宙虚拟人播报表情进行检阅和调整。
2.根据权利要求1所述的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,所述大数据库中包括图像标签模块,所述计算机获取的图像和文字通过图像标签模块提取重要的特征,将图像和文字区分。
3.根据权利要求1所述的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,所述S2中,光学字符识别技术将图书中的文本资料扫描分析,得到文字文本资料,所述光学字符识别技术和文字语音转换技术均为计算机自带技术功能。
4.根据权利要求1所述的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,所述S3中,语音信息数据按照特定情绪的词条处理划分,其中特定情绪的词条为“开心”、“愤怒”、“伤心”、“恐惧”的常用情绪词条。
5.根据权利要求1所述的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,所述大数据库内包括虚拟人的动作表情库,在识别书中文字的情绪后,匹配至虚拟人的动作表情库。
6.根据权利要求1所述的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,在将文字的情绪识别后,内容管理员通过宇宙虚拟人观察,宇宙虚拟人在播放的时候输出对应的情绪动作表情。
7.根据权利要求1所述的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,所述S5中,所述模型重建方法通过大数据库中的模型、材质、纹理和光照信息进行建立。
8.根据权利要求1所述的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,所述S7中,虚拟人的动作表情依照语音信息内容匹配,也就是语音信息内容能对应相应的表情。
9.根据权利要求1所述的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,所述S7中,语音信息分成多个时间段,一个时间段即为一帧,虚拟人的动作表情信息对照不同语音信息帧,并按播报的顺序整理。
10.根据权利要求1所述的基于AI人工智能技术的元宇宙虚拟人图书自动播报方法,其特征在于,所述S9中,播报内容的语音音调或宇宙虚拟人播报表情不满意,返回到S3和S6中,重新选取语音音调或宇宙虚拟人播报表情。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中图云创智能科技(北京)有限公司,未经中图云创智能科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211440070.X/1.html,转载请声明来源钻瓜专利网。