[发明专利]一种基于视线注意力的免唤醒意图召回方法、系统和车辆在审
申请号: | 202211159496.8 | 申请日: | 2022-09-22 |
公开(公告)号: | CN115547332A | 公开(公告)日: | 2022-12-30 |
发明(设计)人: | 张炜玮;李龙飞;林孟超;卢杰;陈彩可;李浩;李晓琴 | 申请(专利权)人: | 中国第一汽车股份有限公司 |
主分类号: | G10L15/26 | 分类号: | G10L15/26;G10L15/22;G10L15/18 |
代理公司: | 北京翔宇专利代理事务所(普通合伙) 11960 | 代理人: | 白海佳 |
地址: | 130011 吉林省长*** | 国省代码: | 吉林;22 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 视线 注意力 唤醒 意图 召回 方法 系统 车辆 | ||
本发明公开了一种基于用户视线注意力的免唤醒意图召回方法、系统和车辆,方法步骤具体包括:获取用户视线坐标;确定用户视线落点,监测用户语音,识别语音信号中的有意义文本,识别用户语音的意图,进行数据识别,查询语音用户的意图与车载装置的对应关系,操作车载装置执行用户语音的意图,并进行反馈。本发明适用于被控装置(设备)与视线追踪装置空间位置关系相对稳定的场景,如车内、家庭、教室等场景。当用户看向装置(设备)并发起与该装置(设备)相关的语音指令时,语音系统能够直接响应,避免单独的唤醒环节,交互的自然程度最接近用户自己动手调节,避免交互效率低下,降低唤醒环节的复杂度并缩短操作时间。
技术领域
本发明涉及一种免唤醒意图召回方法、系统和车辆,尤其涉及一种基于视线注意力的免唤醒意图召回方法、系统和车辆。
背景技术
眼睛看到装置(设备)与期望状态的差异时,比如,看到车窗开度只有20%左右,想开更大一些,这时会用手去调整车窗开度控制开关,直到车窗开度达到自己想要的开度。在另一些场景中,手要进行其他任务时,可以通过语音助手进行相关控制。
综上可知,现在常见的唤醒方式有:唤醒词唤醒、硬按键唤醒、触屏唤醒。唤醒环节造成了用户想控制装置设备的注意力分散,交互效率低,很多技术方案都在尝试降低唤醒环节的复杂度和缩减时间,但仍无法满足人们的需求。
发明内容
本发明的目的在于提供一种基于视线注意力的免唤醒意图召回方法、系统和车辆,解决现有技术存在的缺憾。
本发明提供了下述方案:
一种基于用户视线注意力的免唤醒意图召回方法,具体包括:
基于视线追踪技术,获取用户视线坐标;
根据所述用户视线坐标,确定用户视线落点;
监测用户语音,识别语音信号中的有意义文本;
进行意图识别,识别用户语音的意图;
进行数据识别,查询语音用户的意图与车载装置的对应关系;
操作车载装置执行用户语音的意图,并进行反馈。
进一步的,具体为:预先设立一个可唤醒控制装置的空间位置信息库,根据所述用户视线坐标在空间位置信息库中进行查询,确定用户视线落点。
进一步的,建立意图召回与数据识别信息表,用于查询语音用户的意图与车载装置的对应关系。
进一步的,所述车载装置包括:中控屏幕、车窗、座椅加热控制面板、麦克风和摄像头。
进一步的,所述车载装置具体为:对于具有智能屏幕的车载装置,进行页面ID同步,用于关联页面相关意图;对于非智能品目的设备,同步当前的状态值。
进一步的,按照车载装置的维度,进行意图识别细分或不细分,具体为:
车窗相关意图识别包括:打开车窗、关闭车窗、车窗开到10%;
智能屏幕的车载装置意图识别包括:按照页面区分支持的意图或需要进行数据识别的意图。
一种基于用户视线注意力的免唤醒意图召回系统,具体包括:
用户视线坐标获取模块,用于基于视线追踪技术,获取用户视线坐标;
用户视线落点确定模块,用于根据所述用户视线坐标,确定用户视线落点;
用户语音监测识别模块,用于监测用户语音,进行语音识别,识别语音信号中的有意义文本;
用户语音意图识别模块,用于进行意图识别,识别用户语音的意图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国第一汽车股份有限公司,未经中国第一汽车股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211159496.8/2.html,转载请声明来源钻瓜专利网。