[发明专利]一种物体识别方法、装置及车辆在审
申请号: | 202011044051.6 | 申请日: | 2020-09-28 |
公开(公告)号: | CN112182256A | 公开(公告)日: | 2021-01-05 |
发明(设计)人: | 陈涛;董嵩松;王崇佑 | 申请(专利权)人: | 长城汽车股份有限公司 |
主分类号: | G06F16/438 | 分类号: | G06F16/438;G06F16/483;G06F16/432;G06K9/00;G07C5/08;G10L15/22;H04N5/76;H04N7/18 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 谭镇 |
地址: | 071000 河*** | 国省代码: | 河北;13 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 物体 识别 方法 装置 车辆 | ||
1.一种物体识别方法,其特征在于,应用于车辆的车载终端,所述车载终端存储有行车记录仪所录制的视频,所述方法包括:
监测并记录驾驶员的眼部信息,所述眼部信息包括眼部位置及视线方向;
在接收到用于识别物体的识别指令时,确定所述识别指令的生成时刻;
在所述行车记录仪所录制的视频中,查找目标视频帧;其中,所述目标视频帧的录制时刻和所述生成时刻相同;
根据对所述眼部位置及视线方向的监测记录,查找目标眼部信息;其中,所述目标眼部信息的记录时刻和所述生成时刻相同;
在所述目标视频帧中,查找所述目标眼部信息对应的焦点区域;
对所述焦点区域进行图像识别,并展示识别结果。
2.根据权利要求1所述的物体识别方法,其特征在于,展示识别结果的步骤,包括:
在识别结果包括目标对象时,对所述目标对象的文本信息进行语音解说。
3.根据权利要求1所述的物体识别方法,其特征在于,所述车辆还包括设置于车内的监控摄像头,所述监测并记录驾驶员的眼部信息,包括:
通过所述监控摄像头监测所述驾驶员的眼部与预设参考点之间的第一位置关系,以及监测所述驾驶员的眼球运动信息;
获取所述预设参考点与所述行车记录仪之间的第二位置关系;
根据所述第一位置关系及所述第二位置关系,确定所述驾驶员的眼部位置;
根据所述眼球运动信息,计算所述驾驶员的视线方向;
记录眼部信息,所述眼部信息包括所述眼部位置及所述视线方向。
4.根据权利要求1所述的物体识别方法,其特征在于,在所述识别指令为语音指令时,所述在接收到识别物体的识别指令时,确定所述识别指令的生成时刻的步骤,包括:
在接收到识别物体的识别指令时,获取当前时间及所述识别指令的形成时长;
将所述当前时间减去所述形成时长,计算得到所述识别指令的生成时刻。
5.根据权利要求1所述的物体识别方法,其特征在于,在所述识别指令为触控指令时,所述在接收到识别物体的识别指令时,确定所述识别指令的生成时刻的步骤,包括:
在接收到用于识别物体的识别指令时,将所述识别指令的接收时刻,确定为所述生成时刻。
6.一种物体识别装置,其特征在于,应用于车辆的车载终端,所述车载终端存储有行车记录仪所录制的视频,所述装置包括:
监测模块,用于监测并记录驾驶员的眼部信息所述眼部信息,所述眼部信息包括眼部位置及视线方向;
获取模块,用于在接收到用于识别物体的识别指令时,获取所述识别指令的生成时刻;
第一查找模块,用于在所述行车记录仪所录制的视频中,查找目标视频帧;其中,所述目标视频帧的录制时刻和所述生成时刻相同;
第二查找模块,用于根据对所述眼部位置及视线方向的监测记录,查找目标眼部信息;其中,所述目标眼部信息的记录时刻和所述生成时刻相同;
第三查找模块,用于在所述目标视频帧中,查找所述目标眼部信息对应的焦点区域;
识别模块,用于对所述焦点区域进行图像识别,并展示识别结果。
7.根据权利要求6所述的物体识别装置,其特征在于,所述识别模块,具体用于在识别结果包括目标对象时,对所述目标对象的文本信息进行语音解说。
8.根据权利要求6所述的物体识别装置,其特征在于,所述车辆还包括设置于车内的监控摄像头,所述监测模块包括:
监测单元,用于通过所述监控摄像头监测所述驾驶员的眼部与预设参考点之间的第一位置关系,以及监测所述驾驶员的眼球运动信息;
第一获取单元,用于获取所述预设参考点与所述行车记录仪之间的第二位置关系;
第一确定单元,用于根据所述第一位置关系及所述第二位置关系,确定所述驾驶员的眼部位置;
第一计算单元,用于根据所述眼球运动信息,计算所述驾驶员的视线方向;
记录单元,用于记录眼部信息,所述眼部信息包括所述眼部位置及所述视线方向。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于长城汽车股份有限公司,未经长城汽车股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011044051.6/1.html,转载请声明来源钻瓜专利网。