[发明专利]一种人车交互装置和人车交互方法

说明书

本申请公开了一种人车交互装置和人车交互方法，该装置包括多功能安装调节模块、视觉语音采集模块和信息处理模块；多功能安装调节模块与视觉语音采集模块连接，视觉语音采集模块与信息处理模块连接；多功能安装调节模块根据用户的驾驶姿态安装并调节人车交互装置和视觉语音采集模块；视觉语音采集模块采集用户的头部三维信息、眼部二维图像信息和语音信息发送给信息处理模块；信息处理模块根据上述信息融合确定用户的视线方向、对应的注视对象和辅助信息，并生成人车交互指令。可见，将视线通道作为主通道与其他通道以主辅结合的协作方式发出人车交互指令，对车载设备操控实现人车交互，提高人车交互的可靠性和自然性，降低对单独通道的要求。

技术领域

本申请涉及车辆驾驶技术技术领域，尤其涉及一种人车交互装置和人车交互方法。

背景技术

现阶段，汽车仍然是当今社会人们日常生活中重要的交通工具，随着车辆电子技术和信息化技术的快速发展，在车辆驾驶操作性、安全性等各方面提高的前提下，用户对驾驶车辆时的驾驶舒适性、便捷性和操作智能化的期望越来越高。

驾驶车辆过程中，人与车之间的交互尤为重要，现有技术中，由于语音技术、触摸屏技术等逐渐在汽车上的应用，用户可以通过语音输入、肢体操作等方式控制车辆驾驶，使得人与车辆的互动交流更为简单自然。

但是，发明人经过研究发现，现有技术中的语音输入、肢体操作等人车交互方式，大多数是单向的操控方式，不够自然，且语音输入、肢体操作等在工作模式上均是通道单独通道操控，准确性、可靠性较低，导致人与车辆之间的互动性较差。

发明内容

本申请所要解决的技术问题是，提供一种人车交互装置和人车交互方法，将视线通道作为主通道与其他通道以主辅结合的协作方式发出人车交互指令，对车载设备进行操控实现人车交互，提高人车交互的可靠性和自然性，降低对单独通道的要求。

第一方面，本申请实施例提供了一种人车交互装置，该装置包括：

多功能安装调节模块、视觉语音采集模块和信息处理模块；所述多功能安装调节模块与所述视觉语音采集模块连接，所述视觉语音采集模块与所述信息处理模块连接；

所述多功能安装调节模块，用于根据用户的驾驶姿态安装并调节所述人车交互装置和所述视觉语音采集模块；

所述视觉语音采集模块，用于采集用户的头部三维信息、眼部二维图像信息和语音信息发送给所述信息处理模块；

所述信息处理模块，用于根据所述头部三维信息和所述眼部二维图像信息融合确定用户的视线方向和对应的注视对象，识别所述语音信息确定辅助信息，并根据所述视线方向、所述注视对象和所述辅助信息生成人车交互指令。

优选的，所述视觉语音采集模块包括视觉采集子模块和语音采集子模块；所述视觉采集子模块包括第一红外相机、第二红外相机、彩色相机和带纹理激光光源，所述第一红外相机、所述第二红外相机、所述彩色相机和所述带纹理激光光源安装在同一竖直高度，所述第一红外相机和所述第二红外相机相隔预设距离保持光轴平行；所述语音采集子模块包括麦克风和扬声器。

优选的，所述信息处理模块，具体用于根据所述头部三维信息获得头部三维姿态信息，根据所述眼部二维图像信息获得眼部特征信息，融合所述头部三维姿态信息和所述眼部特征信息确定所述视线方向和所述注视对象，识别所述语音信息确定辅助信息，并根据所述视线方向、所述注视对象和所述辅助信息生成人车交互指令。

优选的，所述头部三维姿态信息包括x位移量、y位移量、z位移量、α旋转角、β旋转角和γ旋转角；所述眼部特征信息包括瞳孔特征信息、虹膜特征信息、眼睑特征信息和/或眼角特征信息。

优选的，所述信息处理模块包括通信接口，所述信息处理模块还用于利用所述通信接口将所述人车交互指令发送给车辆电子控制单元。