[发明专利]一种基于多模态知识推理的公交主动安全预警方法在审
申请号: | 202110084860.8 | 申请日: | 2021-01-21 |
公开(公告)号: | CN112800920A | 公开(公告)日: | 2021-05-14 |
发明(设计)人: | 余建兴;王世祺;印鉴 | 申请(专利权)人: | 中山大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06N5/04;B60Q9/00 |
代理公司: | 广州粤高专利商标代理有限公司 44102 | 代理人: | 刘俊 |
地址: | 510260 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种基于多模态知识推理的公交主动安全预警方法,该方法首先对公交车前置摄像头拍摄的视频提取关键帧;然后基于关键帧构建场景图谱,用于描述公交车所处场景细粒度信息;场景图谱是一种图形式的数据结构,其节点对应图像中的实体对象,描述了这些对象的相关属性,譬如“红灯状态的红绿灯”、“奔跑的行人”、“邻车”、“交通标志牌”等;边则描述了对象间的关系,譬如实体对象“小孩”和“足球”间存在的关系“踢”;以图谱池化的方式,抽取场景图谱的层级化信息,并最终输出一个表征场景图谱整体语义的分布式编码表示;最后,将场景图谱分布式编码表示与传感器模态数据融合,并基于融合结果判断是否需要向公交驾驶员发出安全预警。 | ||
搜索关键词: | 一种 基于 多模态 知识 推理 公交 主动 安全 预警 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中山大学,未经中山大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110084860.8/,转载请声明来源钻瓜专利网。