[发明专利]基于AI开放平台的儿童认知学习交互系统及方法在审
申请号: | 201711317140.1 | 申请日: | 2017-12-12 |
公开(公告)号: | CN108108412A | 公开(公告)日: | 2018-06-01 |
发明(设计)人: | 杜萍;刘弘;陈莉;张桂娟;李焱 | 申请(专利权)人: | 山东师范大学 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06Q50/20;G10L15/22;G10L15/26 |
代理公司: | 济南圣达知识产权代理有限公司 37221 | 代理人: | 黄海丽 |
地址: | 250014 山*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 认知 交互系统 开放平台 学习 导入系统 交互能力 实时获取 素材数据 素材图片 图片素材 现实场景 语音提供 手机 数据库 存储 多媒体 反馈 拍摄 家长 电脑 图片 | ||
本发明公开了基于AI开放平台的儿童认知学习交互系统及方法,具有操作简单、交互能力强的特点。本发明在系统自身提供大量多媒体认知素材数据的前提下,可由用户(包含儿童或家长)提供电脑或手机中存储的图片或现实场景中的实时获取认知素材图片进行认知学习,也可将传统认知图片素材拍摄导入系统数据库中进行认知学习。本发明充分满足儿童认知需求,在认知过程中可以获取儿童通过语音提供的认知结果,并加以判断给予反馈。
技术领域
本发明涉及多媒体交互技术领域,特别是涉及基于AI开放平台(人工智能(Artificial Intelligence),英文缩写为AI)的儿童认知学习交互系统及方法。
背景技术
随着计算机软硬件技术的飞速发展,对各种多媒体信息的获取更加便捷,对其处理效率更加快速,多媒体数据库信息量呈海量增长,将多媒体技术与儿童认知教育相结合已经成为了当前的大势所趋。然而,现有大部分儿童认知系统存在交互形式单一、多媒体内容形式单一、可拓展性较差、个性化不足以及对已有传统素材利用率低等问题。将儿童认知教育与人机交互技术相结合,是解决上述问题的一大法宝。
现有大量针对人机交互的开放平台,如AI百度开放平台等,提供了语音识别、语音合成、图像识别、文本相似度检测等大量的多媒体人机交互技术工具,可使用C++、C#、Python、Java等各种专业编程软件进行在线研发,较原有方法大大提高了产品的开发效率。因此,在儿童认知教育系统中引入多种媒体形式的交互功能从技术角度保证了其可实现性。
发明内容
针对现有相关系统的不足,本发明提供了一种基于AI开放平台的儿童认知学习交互系统及方法,具有操作简单、交互能力强的特点。本发明在系统自身提供大量多媒体认知素材数据的前提下,可由用户(包含儿童或家长)提供电脑或手机中存储的图片或现实场景中的实时获取认知素材图片进行认知学习,也可将传统认知图片素材拍摄导入系统数据库中进行认知学习。本发明充分满足儿童认知需求,在认知过程中可以获取儿童通过语音提供的认知结果,并加以判断给予反馈。
为解决上述技术问题,本发明所采用的技术方案是:
基于AI开放平台的儿童认知学习交互系统,与AI开放平台连接,包括:
认知素材图片导入模块、认知素材数据库模块、图像识别模块、语音获取模块、认知判断模块和输出模块;
所述认知素材图片导入模块,用于获取实时拍摄的图片或用户输入的图片;将实时拍摄的图片或用户输入的图片存储到认知素材数据库中;
所述认知素材数据库,用于存储认知素材图片,所述认知素材图片为实时拍摄的图片或用户输入的图片;
所述图像识别模块,与AI开放平台连接,将认知素材图片导入模块和认知素材数据库中的图片上传给AI开放平台进行图像识别,同时获取AI开放平台对图像识别的文本数据;
所述语音获取模块,与AI开放平台连接,将用户发出的语音采集并上传给AI开放平台,同时获取AI开放平台对语音识别的文本数据;
所述认知判断模块,与AI开放平台连接,用于将图像识别的文本数据和语音识别的文本数据同时上传到AI开放平台进行文本相似度比较,将文本相似度比较结果转换成语音,将文本相似度比较结果的文字和语音返回认知判断模块,认知判断模块接收AI开放平台返回认知判断结果,并将AI开放平台的认知判断结果通过输出模块反馈给用户。
基于AI开放平台的儿童认知学习交互方法,包括:学习和测验两个过程:
学习过程:将获取的认知图片素材发送给AI开放平台,接收AI开放平台的图像识别结果,用户根据图像识别结果对认知图片素材进行学习;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东师范大学,未经山东师范大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711317140.1/2.html,转载请声明来源钻瓜专利网。