[发明专利]一种基于VQA的交通信号辅助判别方法及系统在审
| 申请号: | 202310166626.9 | 申请日: | 2023-02-22 |
| 公开(公告)号: | CN116416581A | 公开(公告)日: | 2023-07-11 |
| 发明(设计)人: | 贾荫鹏;李彬;孙善宝;罗清彩 | 申请(专利权)人: | 山东浪潮科学研究院有限公司 |
| 主分类号: | G06V20/54 | 分类号: | G06V20/54;G06V20/56;G06V10/82;G06V10/774;G06V10/80;G06F16/332;G06F16/33;G06N3/0442;G06N3/08 |
| 代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 姜丽洁 |
| 地址: | 250100 山东省济*** | 国省代码: | 山东;37 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明涉及机器学习和自然语言处理技术领域,具体提供了一种基于VQA的交通信号辅助判别方法,具有如下步骤:S1、收集关于交通的图片,形成数据集;S2、利用数据集训练VQA模型,调整参数及多模态融合方式;S3、将训练完成的最终VQA模型下发至机动车车机系统;S4、机动车驾驶时通过摄像头拍摄照片提取图片特征并保存;S5、当出现有疑问的交通场所时,司机对系统进行询问;S6、机动车车机系统通过词嵌入模型将问题转为VQA模型可识别的向量;S7、VQA模型中文字编码器转为中间向量,并步骤S4产生的图片特征进行多模态融合,将融合结果送至解码器;S8、机动车车机系统将VQA模型所得的文字答案转为语音并播报。与现有技术相比,本发明降低了交通违法事件的发生概率,避免了因道路交通标识复杂难懂导致的交通堵塞、事故的发生。 | ||
| 搜索关键词: | 一种 基于 vqa 交通信号 辅助 判别 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东浪潮科学研究院有限公司,未经山东浪潮科学研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310166626.9/,转载请声明来源钻瓜专利网。





