“多模态交互”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果1386669个，建议您升级VIP下载更多相关专利

[发明专利]多模态响应-CN201910826487.1在审
发明人：阿普丽尔·普法尔;贾里德·斯特劳德曼;哈利·郁;阿德里安娜·奥尔莫斯·安蒂利翁;乔纳森·利夫尼;奥坎·科拉克;詹姆斯·詹戈拉;尼汀·坎德沃尔;杰森·卡恩斯;安德鲁·沃森;约瑟夫·阿谢尔;瓦莱里·尼高 -专利权人：谷歌有限责任公司
申请日： 2019-09-03 - 公布日： 2019-12-06 - 主分类号： G06F3/16 文献下载
摘要：本文涉及多模态响应，尤其公开了用于在动态生成针对客户端设备的当前模态而定制的客户端设备输出中使用多模态响应的系统、方法和装置。多模态客户端设备可以进行跨多模态谱的各种交互，所述交互包括仅语音交互、语音主导交互、多模态交互、视觉主导交互、仅视觉交互等。多模态响应可以包括：要针对全部交互类型被渲染的核心消息以及用于向用户提供附加信息的一个或多个取决于模态的组成部分。
多模态客户端设备模态响应多模态交互方法和装置动态生成附加信息交互类型视觉交互用户提供语音交互主导语音渲染视觉输出

[发明专利]智能设备的交互方法、装置、设备及存储介质-CN202010605326.2有效
发明人：龙云翔 -专利权人：百度在线网络技术（北京）有限公司;上海小度技术有限公司
申请日： 2020-06-29 - 公布日： 2023-10-10 - 主分类号： G10L15/22 文献下载
摘要：本申请提出了一种智能设备的交互方法、装置、设备及存储介质，涉及语音识别、语音交互、自然语言处理和人机交互技术领域，具体实现方案为：接收用户的语音指令；根据语音指令进行意图预测以生成预测意图；当预测意图包括多模态交互意图时，生成多模态交互预指令并发送至多模态识别组件，以使多模态采集组件根据多模态交互预指令预采集多模态数据。根据本申请能够提高多模态交互效率，缩短用户进行多模态交互时的等待时延，提升用户体验。
智能设备交互方法装置存储介质

[发明专利]一种多模态交互的方法-CN201910339021.9有效
发明人：王健;苏战;刘卫平;王诏坚 -专利权人：广州智伴人工智能科技有限公司
申请日： 2019-04-25 - 公布日： 2022-04-05 - 主分类号： G06F3/01 文献下载
摘要：本发明提供了一种多模态交互的方法，包括：机器人获取多模态交互信息，多模态交互信息包括：文字信息、语音信息、视觉信息、动作信息中任一项或多项；多模态交互信息是由用户发出的或者是由用户输入给机器人的；根据获取的多模态交互信息，确定与多模态交互信息相匹配的交互方式；按照确定出的交互方式与用户进行交互。其机器人按照多模态交互信息获取的相应的预设交互方式与用户进行交互，提高用户的体验效果。
一种多模态交互方法

[发明专利]一种多模态信息处理及交互系统-CN202011416110.8有效
发明人：甘明刚;徐磊;田宗凯;陈杰;陈文颉;陈晨;窦丽华 -专利权人：北京理工大学
申请日： 2020-12-07 - 公布日： 2023-04-07 - 主分类号： G06F18/25 文献下载
摘要：本发明涉及一种多模态信息处理及交互系统，用于解决多模态交互系统中存在的模态融合方式简单，对话机制呆板的问题。包括多模态信息认知模块，多模态信息融合模块，以及多模态对话管理模块，其中，多模态信息认知模块用于对用户各模态交互信息进行识别，多模态信息融合模块利用D‑S证据理论将用户所有模态的交互信息进行意图融合，确定用户的最终交互意图，并得到对应于用户最终交互意图的可供机器识别的形式化指令；多模态对话管理模块针对多模态人机交互场景，采用有限状态机与信息槽填充方法相融合的对话管理模型，用于控制对话流程以及生成应答；本发明有效提高了用户交互意图识别准确率，实现了自然灵活的人机交互。
一种多模态信息处理交互系统

[发明专利]基于多模态智能机器人的交互身份鉴别与跟踪方法及系统-CN201711110949.7有效
发明人：刘扬;李佩琛;邵阳雪 -专利权人：河南大学
申请日： 2017-11-13 - 公布日： 2021-03-30 - 主分类号： G06K9/00 文献下载
摘要：本发明属于智能机器人领域，具体涉及用于智能对话机器人的多模态的鉴别和跟踪交互者身份的方法，尤其涉及基于多模态智能机器人的交互身份鉴别与跟踪方法及系统。基于多模态智能机器人的交互身份鉴别与跟踪方法，包括：采集交互对象的多通道信息；采用深度神经网络提取激活特征，构成多通道交互信息的多模态特征；采用跨模态概率认知的集成学习，对人脸图像特征和声纹特征进行身份鉴别；对由跨模态属性鉴别出的交互者身份进行注册和跟踪。基于多模态智能机器人的交互身份鉴别与跟踪系统，包括：多通道信息采集模块；多模态特征提取模块；跨模态身份鉴别模块；交互对象注册跟踪模块。本发明可解决单模态信息缺失，无法识别和跟踪交互身份问题。
基于多模态智能机器人交互身份鉴别跟踪方法系统

[发明专利]心理评估方法、装置、设备及存储介质-CN202310920851.7在审
发明人：江云凯;胡加学;赵景鹤;贺志阳;鹿晓亮;王士进;魏思;胡国平;甘露 -专利权人：讯飞医疗科技股份有限公司
申请日： 2023-07-24 - 公布日： 2023-10-24 - 主分类号： G16H50/30 文献下载
摘要：本申请公开了一种心理评估方法、装置、设备及存储介质，本申请获取受测者的多模态交互信息，其中包括文本模态的交互信息，以及其它非文本模态的交互信息，如语音模态、视频模态的交互信息，本申请还配置了多模态知识图谱，多模态知识图谱中至少部分节点包含两种以上模态的心理学知识信息，通过多模态知识图谱可以丰富对心理学知识的表示，进一步对获取的受测者的多模态交互信息中每一种模态的交互信息进行编码及特征融合，得到融合后多模态特征，获取多模态知识图谱的表示特征，基于融合后多模态特征和多模态知识图谱的表示特征进行交互式推理，可以得到受测者的心理状态的评估结果，提升了心理评估结果的准确性。
心理评估方法装置设备存储介质

[发明专利]应用于视频直播平台的虚拟机器人多模态交互方法和系统-CN201710551230.0有效
发明人：黄钊 -专利权人：北京光年无限科技有限公司
申请日： 2017-07-07 - 公布日： 2021-02-26 - 主分类号： G06N3/00 文献下载
摘要：本发明公开了一种应用于视频直播平台的虚拟机器人多模态交互方法，所述视频直播平台应用接入具备多模态交互能力的虚拟机器人，多模态交互方法包括以下步骤：在预设区域显示具有特定形象的虚拟机器人，进入默认直播辅助模式，实时接收直播间输入的多模态数据和多模态指令；解析所述多模态数据和所述多模态指令，利用所述虚拟机器人的所述多模态交互能力，判别并确定目标直播辅助模式；开启目标直播辅助模式，所述虚拟机器人根据目标直播辅助模式进行多模态交互及展示本发明利用直播模式转换展示多方式的多模态交互，提高用户兴趣，保持用户粘性，改善用户体验。
应用于视频直播平台虚拟机器人多模态交互方法系统

[发明专利]基于多模态客户端设备的模态的动态列表构成-CN201910949390.X有效
发明人：阿普丽尔·普法尔;克里索贝丽尔·弗朗西斯科;贾里德·斯特劳德曼;佩尔·安德森;奥伦·布拉斯贝格;安德鲁·沃森;马德莱娜·普劳切 -专利权人：谷歌有限责任公司
申请日： 2019-10-08 - 公布日： 2023-08-11 - 主分类号： G06F3/01 文献下载
摘要：本申请涉及基于多模态客户端设备的模态的动态列表构成。本文公开了用于以根据客户端设备的当前模态而定制的方式动态地将列表中的项划分为一个或多个子集的系统、方法和装置。多模态客户端设备可以进行跨多模态谱的各种交互，所述交互包括仅语音交互、语音主导交互、多模态交互、视觉主导交互、仅视觉交互等。列表可以部分地基于多模态设备的当前模态、指示关于列表的附加信息的一个或多个列表属性等被划分为子集。
基于多模态客户端设备动态列表构成

[发明专利]基于虚拟人的视觉交互方法及系统-CN201810442311.1有效
发明人：尚小维;李晓丹;俞志晨 -专利权人：北京光年无限科技有限公司
申请日： 2018-05-10 - 公布日： 2022-03-22 - 主分类号： G06F3/01 文献下载
摘要：本发明提供一种基于虚拟人的视觉交互方法，虚拟人通过智能设备展示，在处于交互状态时启动语音、情感、视觉以及感知能力，方法包含：通过虚拟人输出多模态数据；接收用户针对多模态数据提供的多模态交互数据；解析多模态交互数据，其中：通过视觉能力检测并提取多模态交互数据中的手部伸缩动作或手臂收放动作作为交互意图；通过虚拟人按照交互意图进行多模态交互输出。本发明提供的基于虚拟人的视觉交互方法及系统提供了一种虚拟人，虚拟人具备预设形象和预设属性，能够与用户进行多模态的交互。并且，本发明提供的虚拟人的视觉交互方法及系统还能够通过手部伸缩动作或手臂收放动作判断用户的意图，与用户展开交互，使得用户享受拟人的交互体验。
基于虚拟视觉交互方法系统

[发明专利]人机交互方法及智能设备-CN202111414636.7在审
发明人：朱益;鲍懋;钱能锋;张文杰 -专利权人：阿里巴巴（中国）有限公司
申请日： 2021-11-25 - 公布日： 2022-02-15 - 主分类号： G06F3/16 文献下载
摘要：本申请实施例提供了一种人机交互方法及智能设备，其中，人机交互方法包括：获取智能设备针对其所在空间环境中的交互对象采集的多模态数据，其中，所述多模态数据包括以下模态数据中的至少两种：语音数据、图像数据、针对所述智能设备的触摸数据；对所述多模态数据进行多模态聚类，根据多模态聚类的结果获取所述交互对象的属性信息和行为模态数据；根据所述属性信息和所述行为模态数据，主动与所述交互对象进行交互。通过本申请实施例，智能设备可主动发起交互，以与交互对象进行沟通和交流，提升智能设备向用户提供的功能服务的触达率，以及用户的交互体验。
人机交互方法智能设备

[发明专利]基于虚拟人的头部交互方法及系统-CN201810141674.1在审
发明人：尚小维;俞志晨;李晓丹 -专利权人：北京光年无限科技有限公司
申请日： 2018-02-11 - 公布日： 2018-08-31 - 主分类号： G06N3/00 文献下载
摘要：本发明提供一种基于虚拟人的头部交互方法，虚拟人通过智能设备展示，在处于交互状态时启动语音、情感、视觉以及感知能力，方法包含：通过虚拟人输出多模态数据；接收用户针对多模态数据提供的多模态交互数据；解析多模态交互数据，其中：通过视觉能力检测并提取多模态交互数据中的头部点头动作作为交互意图；通过虚拟人按照交互意图进行多模态交互输出。本发明提供的虚拟人的头部交互方法及系统提供了一种虚拟人，虚拟人具备预设形象和预设属性，能够与用户进行多模态的交互。并且，本发明还能够通过头部的点头动作判断用户的意图，与用户展开交互，使得用户与虚拟人之间能够进行流畅的交流，并使得用户享受拟人的交互体验。
虚拟多模态交互多模态数据点头动作预设感知能力交互体验交互状态接收用户视觉能力系统提供智能设备输出多模态解析语音视觉检测展示交流

[发明专利]基于虚拟人的头部交互方法及系统-CN201810142251.1在审
发明人：尚小维;俞志晨;李晓丹 -专利权人：北京光年无限科技有限公司
申请日： 2018-02-11 - 公布日： 2018-08-31 - 主分类号： G06N3/00 文献下载
摘要：本发明提供一种基于虚拟人的头部交互方法，虚拟人通过智能设备展示，在处于交互状态时启动语音、情感、视觉以及感知能力，方法包含以下步骤：通过虚拟人输出多模态数据；接收用户针对多模态数据提供的多模态交互数据；解析多模态交互数据，其中：通过视觉能力检测并提取多模态交互数据中的摇头动作作为交互意图；通过虚拟人按照交互意图进行多模态交互输出。本发明提供的虚拟人的头部交互方法及系统提供了一种虚拟人，具备预设形象和预设属性，能够与用户进行多模态交互。并且，本发明还能够通过头部的摇头动作判断用户的意图，与用户展开交互，使得用户与虚拟人之间能够进行流畅的交流，并使得用户享受拟人的交互体验。
虚拟多模态交互多模态数据摇头动作预设感知能力交互体验交互状态接收用户视觉能力系统提供智能设备输出解析视觉语音检测展示交流

[发明专利]基于虚拟人的视觉交互方法及系统-CN201810442754.0在审
发明人：尚小维;李晓丹;俞志晨 -专利权人：北京光年无限科技有限公司
申请日： 2018-05-10 - 公布日： 2018-10-19 - 主分类号： G06F3/01 文献下载
摘要：本发明提供一种基于虚拟人的视觉交互方法，虚拟人通过智能设备展示，在处于交互状态时启动语音、情感、视觉以及感知能力，包含以下步骤：通过虚拟人输出多模态数据；接收用户针对多模态数据提供的多模态交互数据；解析多模态交互数据，其中：通过视觉能力检测并提取多模态交互数据中的手部定向摆动动作作为交互意图；通过虚拟人按照交互意图进行多模态交互输出。本发明提供的基于虚拟人的视觉交互方法及系统提供了一种虚拟人，虚拟人具备预设形象和预设属性，能够与用户进行多模态的交互。并且，本发明还能够通过手部的定向摆动动作判断用户的意图，与用户展开交互，使得用户与虚拟人之间能够进行流畅的交流，并使得用户享受拟人的交互体验。
虚拟多模态交互视觉交互多模态数据摆动动作手部预设感知能力交互体验交互状态接收用户视觉能力系统提供智能设备输出多模态解析语音视觉检测展示交流

[发明专利]基于虚拟人的视觉交互方法及系统-CN201810443323.6在审
发明人：尚小维;李晓丹;俞志晨 -专利权人：北京光年无限科技有限公司
申请日： 2018-05-10 - 公布日： 2018-10-12 - 主分类号： G06F3/01 文献下载
摘要：本发明提供基于虚拟人的视觉交互方法，虚拟人通过智能设备展示，在处于交互状态时启动语音、情感、视觉以及感知能力，包含以下步骤：通过虚拟人输出多模态数据；接收用户针对多模态数据提供的多模态交互数据；解析多模态交互数据，其中：通过视觉能力检测并提取多模态交互数据中的手部握拳动作和同时出现的与手部配合的肢体动作，并将其与交互上下文环境进行结合以识别出交互意图；通过虚拟人按照交互意图进行多模态交互输出。本发明的基于虚拟人的视觉交互方法及系统提供了一种虚拟人，具备预设形象和预设属性，能够与用户进行多模态的交互。并且，还能够通过手部的握拳动作以及与手部配合的肢体动作判断用户的意图，使得用户享受拟人的交互体验。
虚拟多模态交互手部视觉交互多模态数据肢体动作预设交互上下文输出感知能力交互体验交互状态接收用户视觉能力系统提供智能设备多模态解析配合语音视觉检测展示

[发明专利]基于虚拟人的视觉交互方法及系统-CN201810443358.X在审
发明人：尚小维;李晓丹;俞志晨 -专利权人：北京光年无限科技有限公司
申请日： 2018-05-10 - 公布日： 2018-10-12 - 主分类号： G06F3/01 文献下载
摘要：本发明提供一种基于虚拟人的视觉交互方法，虚拟人通过智能设备展示，在处于交互状态时启动语音、情感、视觉以及感知能力，其包含：通过虚拟人输出多模态数据；接收用户针对多模态数据提供的多模态交互数据；解析多模态交互数据，其中：通过视觉能力检测并提取多模态交互数据中的手部点赞动作作为交互意图；通过虚拟人按照交互意图进行多模态交互输出。本发明提供的基于虚拟人的视觉交互方法及系统提供了一种虚拟人，具备预设形象和预设属性，能够与用户进行多模态的交互。并且，本发明还能够通过手部的点赞动作判断用户的意图，与用户展开交互，使得用户与虚拟人之间能够进行流畅的交流，并使得用户享受拟人的交互体验。
虚拟多模态交互视觉交互多模态数据手部预设动作判断感知能力交互体验交互状态接收用户视觉能力系统提供智能设备输出多模态解析视觉语音检测展示交流

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
下一页»
尾页
共 100000 条