[发明专利]机动车驾驶员手部动作感知系统、培训系统和培训方法

权利要求书

1.一种机动车驾驶员手部动作感知系统，其特征在于，包括数据获取模块、数据预处理模块和机件识别模型构建模块；

所述数据获取模块用于在机动车驾驶员发生手部动作并触摸机件时进行标注，形成初始机件识别数据集；其中，所述标注按当前机件的功能进行分解标示，形成动作前的功能标示、动作中的操作标示和动作后的效果标示，以对手部动作触摸机件的前、中、后都提供机器可读取的关联指示；并且对于具有至少一种选择操作模式的所述机件，则所述标注按当前机件的各种选择操作模式进行分选标示；

所述数据预处理模块与所述数据获取模块连接，所述数据预处理模块用于对所述初始机件识别数据集进行预处理，形成增强机件识别数据集；

所述机件识别模型构建模块与所述数据预处理模块连接，所述机件识别模型构建模块用于根据所述增强机件识别数据集，构建反映所述手部动作对所述机件进行操作的机件识别模型；

还包括感知模块，所述感知模块与所述数据获取模块连接；

所述感知模块包括手套感知模块，所述手套感知模块用于通过手套接触方式获取机动车驾驶员的手部动作；所述数据获取模块用于根据所述手部动作和根据预设的机件位置，以压力感应方式判定所述手部动作是否导致机动车驾驶员的手部触摸机件，在机动车驾驶员的手部触摸机件时进行标注，形成初始机件识别数据集。

2.根据权利要求1所述机动车驾驶员手部动作感知系统，其特征在于，所述感知模块还包括视觉感知模块；

所述视觉感知模块用于通过视觉感知方式获取机动车驾驶员的手部动作；所述数据获取模块用于根据所述手部动作和预设的机件位置，以位置拟合方式判定所述手部动作是否导致机动车驾驶员的手部触摸机件，在机动车驾驶员的手部触摸机件时进行标注，形成初始机件识别数据集。

3.根据权利要求1所述机动车驾驶员手部动作感知系统，其特征在于，所述数据获取模块包括数据采集模块和数据标注模块；

所述数据采集模块用于采集机动车驾驶员的手部动作，形成机动车驾驶员在触摸机件时的手部姿态图像数据；

所述数据标注模块用于对所述手部姿态图像数据进行标注，形成初始机件识别数据集。

4.根据权利要求3所述机动车驾驶员手部动作感知系统，其特征在于，还包括感知模块，所述感知模块与所述数据获取模块连接，所述感知模块用于通过视觉感知方式获取机动车驾驶员的手部动作的视觉图像数据；

所述数据采集模块用于通过图像采集方式从所述视觉图像数据中采集机动车驾驶员的手部动作，形成机动车驾驶员在触摸机件时的手部姿态图像数据。

5.根据权利要求1到4任一项中所述机动车驾驶员手部动作感知系统，其特征在于，还包括模型评价模块，所述模型评价模块与所述机件识别模型构建模块连接，所述模型评价模块用于评价所述机件识别模型，得到评价结果；或者，所述模型评价模块还用于在所述评价结果出现异常或者不合标准时进行修正反馈；或者，所述机件包括档位控制器、驻车制动控制器、方向盘、点火开关、雨刷控制器、喇叭控制器、仪表盘、转向灯控制器、左后视镜和车内后视镜。

6.根据权利要求5所述机动车驾驶员手部动作感知系统，其特征在于，还包括调整模块，所述调整模块分别与所述模型评价模块和所述机件识别模型构建模块连接，所述调整模块用于根据所述评价结果调整所述机件识别模型；

和/或，还包括模型输出模块，所述模型输出模块分别与所述模型评价模块和所述机件识别模型构建模块连接，所述模型输出模块用于根据所述评价结果确定是否输出所述机件识别模型。

7.一种机动车驾驶员手部动作感知培训系统，其特征在于，包括教学讲解模块和权利要求1到6任一项中所述机动车驾驶员手部动作感知系统；

所述教学讲解模块与所述机件识别模型构建模块连接，所述教学讲解模块用于在教学状态下，当机动车驾驶员发生手部动作并触摸机件时，根据所述机件识别模型提供实时教学讲解。