[实用新型]一种多源异构传感器特征深度融合的装置有效

专利信息
申请号: 201821413848.7 申请日: 2018-08-30
公开(公告)号: CN208937705U 公开(公告)日: 2019-06-04
发明(设计)人: 关庆阳 申请(专利权)人: 沈阳航空航天大学
主分类号: G01S13/86 分类号: G01S13/86;G01S13/93;G05D1/02
代理公司: 沈阳东大知识产权代理有限公司 21109 代理人: 梁焱
地址: 110136 辽宁省沈*** 国省代码: 辽宁;21
权利要求书: 查看更多 说明书: 查看更多
摘要: 实用新型提供一种多源异构传感器特征深度融合的装置,涉及人工智能技术领域。该装置包括N个激光雷达及机器视觉的多源异构传感器阵列、ZYNQ‑7000平台、FLASH大型存储芯片。通过多源异构多种传感器获取目标的多维数据特征,在ZYNQ‑7000平台,通过不同的多源异构传感器的坐标特征变换,形成具有统一维度的特征空间,通过建立深度学习网络,将多源异构传感器进行融合,实现机器视觉与激光雷达目标捕获、信息提取与特征分类及融合。本实用新型为无人机器目标特征识别及决策控制提供准确、可靠、具有鲁棒性的环境数据,对提高主动避撞识别系统性能、减少碰撞事故发生具有重要意义。
搜索关键词: 多源异构传感器 本实用新型 机器视觉 激光雷达 深度融合 碰撞事故 人工智能技术 大型存储 多维数据 多源异构 环境数据 获取目标 机器目标 决策控制 目标捕获 识别系统 特征分类 特征空间 特征识别 信息提取 重要意义 主动避撞 坐标特征 融合 传感器 鲁棒性 维度 芯片 网络 统一 学习
【主权项】:
1.一种多源异构传感器特征深度融合的装置,其特征在于:包括N个激光雷达及机器视觉的多源异构传感器阵列、ZYNQ‑7000平台、FLASH大型存储芯片;ZYNQ‑7000平台包括ARM Cortex A9双核、FPGA逻辑计算单元;N个激光雷达及机器视觉的多元传感器阵列通过光纤接口或者网络接口与ARM Cortex A9双核实现连接;FPGA逻辑计算单元外接FLASH大型存储芯片。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于沈阳航空航天大学,未经沈阳航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/patent/201821413848.7/,转载请声明来源钻瓜专利网。

同类专利
  • 一种基于多传感器融合的辅助列车车皮挂接的便携式测距仪及其工作方法-201910689163.8
  • 刘兆庆;乔立岩;宋星元;黄杰 - 哈尔滨工业大学
  • 2019-07-29 - 2019-11-05 - G01S13/86
  • 本发明公开了一种基于多传感器融合的辅助列车车皮挂接的便携式测距仪及其工作方法,包括传感器模块、处理器模块和显示器模块,处理器模块分别与传感器模块和显示器模块连接,其中,处理器模块包括:毫米波雷达传感器单元和单目RGB图像传感器单元,毫米波雷达传感器单元,用于实时采集前方目标物的定位数据;单目RGB图像传感器单元,用于实时采集前方目标区域的彩色图像。本发明通过使用传感器,能够科学准确地计算目标车皮的距离而不是操作人员仅凭经验与肉眼观察得到的模糊判断,从而大大消除了人工控制低效不稳定的缺陷,且不受恶劣天气影响,两种传感器单元优势互补,减小了人力资源成本。
  • 一种基于多传感器融合的列车车皮识别与测距方法-201910689859.0
  • 刘兆庆;乔立岩;宋星元;黄杰 - 哈尔滨工业大学
  • 2019-07-29 - 2019-11-05 - G01S13/86
  • 本发明公开了一种基于多传感器融合的列车车皮识别与测距方法,包括以下步骤:S1双传感器对目标区域数据进行采集与处理,得到各自的标准数据;S2根据各自的标准数据,搭建数据融合平台,并得到有效目标区域;S3根据有效目标区域对目标进行识别与检测;S4在有效目标区域中提取目标车皮的距离信息,将得到的是否目标车皮的信息和对应的距离信息实时传递至前端。本发明能自动地测量出列车车尾部与待挂车皮之间距离,并实时为机车司机提供该距离参数,便于机车实时、准确地调整列车速度,最终达到可靠、安全地挂接待挂列车。
  • 传感器系统及自动驾驶车辆-201910750238.9
  • 李子韬;王坚兴;陈志琼 - 深圳中集专用车有限公司
  • 2019-08-14 - 2019-11-05 - G01S13/86
  • 本发明涉及一种自动驾驶车辆及传感器系统,自动驾驶车辆包括车身以及置于车身上的传感器系统,传感器系统包括第一摄像模组,第一摄像模组包括四个第一摄像头,分别对应安装于车身的各个侧边上,每个第一摄像头的视距均大于车身的长度;位于车身前面的侧边上的第一摄像头的光轴向着车身的侧后方,位于车身后面的侧边上的第一摄像头的光轴向着车身的侧前方,位于车身同一侧面上的两个第一摄像头的光轴相交,第一摄像头的视角和车身的侧面相交。通过两个第一摄像头在车身同一侧面上的布置方式,单个侧面附近的区域均处于两个第一摄像头的视野范围内,使得车身侧面具有足够大的视野区域,避免车身侧面存在视野盲区。
  • 微波和激光一体化复合雷达-201610674819.5
  • 李曙光;徐显文 - 上海航天测控通信研究所
  • 2016-08-16 - 2019-10-25 - G01S13/86
  • 本发明提供了一种微波和激光一体化复合雷达,包括:综合控制器、微波回波通道和激光回波通道;微波回波通道包括:第二电混频器、复用模数转换器、复用信号处理器;微波回波信号经第二电混频器与本振微波信号进行混频,提取获得微波雷达中频信号,微波雷达中频信号依次经过复用模数转换器的模数转换和复用信号处理器的信号处理后传输至综合控制器;激光回波通道包括:光耦合器、光电探测器、以及复用模数转换器、复用信号处理器;激光回波信号经过光耦合器与参考激光信号进行相干探测获得相干信号,相干信号经过光电探测器提取获得激光雷达中频信号,激光雷达中频信号经过复用模数转换器的模数转换和复用信号处理器的信号处理后传输至综合控制器。
  • 基于雷达和光电融合的高机动和悬停目标全航迹跟踪方法-201910515966.1
  • 袁爱英 - 北京雷久科技有限责任公司
  • 2019-06-14 - 2019-10-18 - G01S13/86
  • 本发明提供一种基于雷达和光电融合的高机动和悬停目标全航迹跟踪方法,具体过程为:雷达系统对运动目标进行稳定跟踪,并将稳定跟踪目标的位置信息发送给光电系统,启动并引导光电系统对目标进行捕获;光电系统一旦捕获目标,并将本系统的处理结果信息实时回传给雷达系统;雷达系统对自身与光电系统的测量信息进行融合处理,更新目标的跟踪航迹。本发明利用光电系统对悬停目标的检测能力,解决仅雷达系统不能检测静止目标的问题,使基于雷达和光电融合的系统具有连续跟踪走‑停目标的能力,航迹连续性好。
  • 雷达和光学设备一体化结构装置-201822105870.1
  • 林德银 - 上海鹰觉科技有限公司
  • 2018-12-14 - 2019-10-08 - G01S13/86
  • 本实用新型提供了一种雷达和光学设备一体化结构装置,其特征在于,包括:雷达设备(1)、光学设备、云台(3)、上位计算机、显示器;其中,雷达设备(1)、光学设备分别安装在同一个云台(3)上;所述云台(3)包括雷达设备安装支架、光学设备安装支架、云台方位驱动器、云台控制器;光学设备包括光学控制器、至少两个光学舱室;所述上位计算机通过外部通信网络直接与所述固态雷达和所述光学设备连接;所述上位计算机输出端与所述显示器输入端连接。本实用新型中的所述固态雷达、光学设备安装在云台上,实现真正意义物理结构上的一体化探测识别装置。
  • 基于多传感器信息融合的障碍物检测方法-201710100068.0
  • 陈蓉;翟光耀;吴澄;汪一鸣 - 苏州大学
  • 2017-02-23 - 2019-10-01 - G01S13/86
  • 本发明公开了一种基于多传感器信息融合的障碍物检测方法,所述方法包括:S1、获取毫米波雷达探测到的雷达数据和机器视觉探测到的图像数据,并对雷达数据和图像数据进行空间融合和时间融合;S2、基于毫米波雷达进行目标检测,筛选雷达数据,并根据毫米波雷达返回目标信号的位置动态规划感兴趣区域;S3、基于机器视觉进行运动目标检测,并计算毫米波雷达与机器视觉融合的目标重合度;S4、根据毫米波雷达和机器视觉的运动目标检测结果检测、追踪障碍物目标。本发明利用不同域信息的重合度来检测、追踪障碍物目标,提高了障碍物检测方法的可靠性,同时,该方法可实现障碍物分类,区分出目标是行人还是车辆。
  • 用于与建筑物中的自主运载工具一起的超宽带信号使用的系统和方法-201780083808.2
  • D.R.海伊;D.C.科克斯;J.J.奥布里恩 - 沃尔玛阿波罗有限责任公司
  • 2017-11-17 - 2019-09-13 - G01S13/86
  • 建筑物中的产品分发系统包括无人驾驶运载工具和无人驾驶运载工具中的控制电路。无人驾驶运载工具在建筑物内独立操作。无人驾驶运载工具配置成发射和接收第一超宽带(UWB)信号。控制电路配置成基于对第一UWB信号中的至少一些的分析来确定无人驾驶运载工具的位置,并且配置成根据位置来导航无人驾驶运载工具。无人驾驶运载工具配置成将第二UWB信号发射到在建筑物内操作的设备,并且响应地从设备接收第三UWB信号。基于对第三UWB信号的分析,控制电路确定设备的位置以避免无人驾驶运载工具与设备之间的碰撞。
  • 雷达检测系统-201880006034.8
  • A.M.芬;N.C.索尔德纳;J.扎基奥;熊子友;C.托戈斯 - 开利公司
  • 2018-01-05 - 2019-08-23 - G01S13/86
  • 一种雷达存在检测系统配置成检测建筑物内的振荡。雷达存在检测系统包括加速度计、雷达和处理单元。加速度计附着到建筑物并且配置成检测结构振动波。雷达配置成传送监测波并且接收反射波。处理单元包括滤波器、自适应滤波器以及检测器。滤波器配置成接收指示反射波的第一信号并且输出跨越指示建筑物内的振荡的频率范围的、经滤波的反射波信号。自适应滤波器配置成接收指示结构振动波信号的第二信号并且输出跨越频率范围的聚焦振动信号以用于消除振动噪声。
  • 车辆周边目标物的检测方法-201910346124.8
  • 冼伯明;高锋;张博闻;熊禹;吴祖亮;廖黎;周翔 - 东风柳州汽车有限公司
  • 2019-04-26 - 2019-08-06 - G01S13/86
  • 本发明公开了一种车辆周边目标物的检测方法,利用装在车辆上的雷达和摄像头获取的信息,通过处理器,先将对雷达信息和摄像头分别进行卡尔曼预测处理后,再对这两类目标物信息进行坐标匹配,坐标匹配中将二者距离小于设定值的目标合并,并赋予合并目标预测信息量的加权值,坐标匹配中将二者距离等于或大于设定值的雷达目标物和图像目标物分别赋予预测信息量加权值,最后将这些加权计算了预测信息量的目标预测信息进行卡尔曼预测得到车辆周边的融合目标物信息。该方法可以解决现有同类技术中目标物漏检率较大的问题。
  • 基于摄像头与雷达融合的定位装置-201821872076.3
  • 辛朝洁;莫松文;林灿盛;凌云志;张业楚 - 深圳南方德尔汽车电子有限公司
  • 2018-11-14 - 2019-07-23 - G01S13/86
  • 本实用新型涉及基于摄像头与雷达融合的定位装置,包括摄像头、视频处理单元、雷达单元以及主控单元;摄像头,用于获取车载环境的视频;视频处理单元,用于对视频进行解码处理;雷达单元,用于获取车辆的雷达信号以及CAN信号;主控单元,用于接收视频处理单元输入的解码处理后的视频、雷达信号以及CAN信号,对视频、雷达信号以及CAN信号进行融合处理,以得到车辆的定位信号。本发实用新型实现结合车载环境进行精准定位,成本低。
  • 智能车辆的感知系统-201821875322.0
  • 王玲;王锋;张仁辉;柯达远;廖茜茜;关庆阳;柯瑞林 - 深圳市数聚天源人工智能有限公司
  • 2018-11-14 - 2019-07-16 - G01S13/86
  • 本实用新型公开了智能车辆的感知系统,包括数据收集系统、数据处理系统和数据应用系统,所述数据收集系统的输出端与数据处理系统的输入端连接,所述数据处理系统的输出端与数据应用系统的输入端连接;所述数据收集系统包括超声波雷达、雷达测速传感器、激光雷达传感器、GPS定位装置和视觉装置;所述数据处理系统包括信号融合器、总线收发器和控制器,所述信号融合器的输出端与总线收发器的输入端连接,所述总线收发器的输出端与控制器的输入端连接。本实用新型通过多个探测传感器的设置,使系统可以更全面的对车辆周围的数据进行收集,从而提升了智能车辆的安全性。
  • 一种多模式目标探测系统-201821522675.2
  • 赵照;刁凤斌 - 合肥芯福传感器技术有限公司
  • 2018-09-18 - 2019-07-12 - G01S13/86
  • 本实用新型公开一种多模式目标探测系统,包括传感器组件,用于实时采集外部环境的原始信号;预处理模块,用于对采集的原始信号进行处理,获得数字信号;数据分析模块,基于预先设置的算法对数字信号进行识别,提取特征值;信息融合模块,用于对数字信号特征值进行匹配和融合处理,形成实时二维或三维外部环境图像,预处理模块、数据分析模块和信息融合模块相互之间通过立体IC电路互联结构组态起来。本实用新型通过设置多个传感器实时采集外部环境信息进行融合,数据间形成互补,对外部环境进行二维或三维空间重构,提高了感知环境的准确性和全面性;增加了数据的真实性、可靠性和识别环境目标的准确性,提高了环境探测的稳定性和适应性。
  • 用于使用雷达数据和成像器数据跟踪物体的装置、系统和方法-201780071557.6
  • F·图克森;T·桑德加德 - 追踪者有限责任公司
  • 2017-12-04 - 2019-07-09 - G01S13/86
  • 一种系统包括:具有第一视野的雷达装置,该装置生成雷达数据,该雷达数据对应于指示第一视野内的移动物体距装置的距离的量程或指示物体与装置之间的距离随时间的变化率的量程变化率;具有第二视野的成像器,该第二视野在重叠视野中至少部分地与第一视野重叠,该成像器生成当物体在第二视野中时在至少一个维度上测量物体相对于成像器的角位置的成像器数据;以及处理器,该处理器在物体在重叠视野中时组合成像器数据和雷达数据以在至少两个维度上识别物体的踪迹,仅使用来自成像器的数据来确定该角位置。
  • 雷达辅助跟踪移动设备以改善高频通信中的通信链路-201680090905.X
  • E·本特松;应志农 - 索尼移动通讯有限公司
  • 2016-11-22 - 2019-07-02 - G01S13/86
  • 在高频移动通信网络中,使用诸如雷达脉冲等的脉冲信号发射作为确定或辅助确定预定区域中很可能存在用户设备(UE)和/或跟踪UE的手段。作为确定很可能存在UE和/或跟踪UE的结果,可以使用此类信息,以在所述通信网络内加快切换或建立重新连接。在这方面,可以在已经确定很可能存在UE的方向上执行更有针对性的波束扫掠或更频繁的扫掠,以便促进建立诸如基站(BS)等的目标发射点之间的通信链路或者与现有发射点的重新连接。
  • 一种多光谱雷达光电监测系统-201821312395.9
  • 余齐齐;吴昌才 - 厦门博海中天信息科技有限公司
  • 2018-08-15 - 2019-06-11 - G01S13/86
  • 本实用新型公开一种多光谱雷达光电监测系统,其包括多光谱成像系统、重载平台、雷达系统、主控器、通信组件和远程监控展示终端;多光谱成像系统搭载于重载平台上并由重载平台带动转动,多光谱成像系统和雷达系统分别连接主控器,主控器通过通信组件连接远程监控展示终端,雷达系统用于探测跟踪目标的运动信息,多光谱成像系统集成多种光谱的成像仪并采集视频数据。多光谱成像系统可实现昼夜24小时不间断的视频监控,透雾性能好,在雾天也能有良好的成像效果。雷达视频实时存储、支持留查取证的雷达和视频分别回访功能。本实用新型实现多目标自动持续稳定跟踪、多种智能报警功能。
  • 一种多源异构传感器特征深度融合的装置-201821413848.7
  • 关庆阳 - 沈阳航空航天大学
  • 2018-08-30 - 2019-06-04 - G01S13/86
  • 本实用新型提供一种多源异构传感器特征深度融合的装置,涉及人工智能技术领域。该装置包括N个激光雷达及机器视觉的多源异构传感器阵列、ZYNQ‑7000平台、FLASH大型存储芯片。通过多源异构多种传感器获取目标的多维数据特征,在ZYNQ‑7000平台,通过不同的多源异构传感器的坐标特征变换,形成具有统一维度的特征空间,通过建立深度学习网络,将多源异构传感器进行融合,实现机器视觉与激光雷达目标捕获、信息提取与特征分类及融合。本实用新型为无人机器目标特征识别及决策控制提供准确、可靠、具有鲁棒性的环境数据,对提高主动避撞识别系统性能、减少碰撞事故发生具有重要意义。
  • 一种基于状态估计的光/电传感器目标关联方法-201710376525.9
  • 刘铮;盛晶;陈文晶;毛宏霞 - 北京环境特性研究所
  • 2017-05-25 - 2019-05-24 - G01S13/86
  • 本发明公开了一种基于状态估计的光/电传感器目标关联方法,步骤有:(1)输入目标特征集合、传感器模型和数据关联模型,构建基于最优特征集合的目标状态广义似然函数;(2)以运动特性为纽带,对连续运动姿态变化下目标的光/电特征数据矩阵进行差分,得到目标特征空间状态转移模型;(3)基于广义似然函数的目标状态预估与反馈系统建模;(4)根据多传感器得到的观测数据,进行多传感器下目标组合在目标状态预估与反馈系统建模中寻优;(5)多传感器多目标关联。本发明避免了对远距离弱小目标识别中其他关联识别传感器权重分配、识别证据冲突、目标同一性判断等一系列有待解决的难题,可在复杂场景下远距离弱小目标关联联合识别中应用。
  • 基于序贯滤波的空时偏差联合估计与补偿方法及系统-201810120311.X
  • 周共健;卜石哲 - 哈尔滨工业大学
  • 2018-02-07 - 2019-05-21 - G01S13/86
  • 本发明涉及一种基于序贯滤波的空时偏差联合估计与补偿方法及系统,其中方法包括:利用UKF滤波算法估计目标状态,采用不敏变换计算状态采样点和对应的权值;利用状态采样点和对应的权值计算预测状态采样点,预测状态和预测状态误差协方差矩阵;利用预测状态采样点计算预测量测采样点,以及第k个量测时刻的预测量测向量;利用预测量测采样点和第k个量测时刻的预测量测向量计算新息矩阵以及状态和观测之间的互协方差矩阵,并获得卡尔曼增益;更新扩维状态向量和扩维状态误差协方差矩阵的估计。本发明用空时偏差对目标状态进行扩维,对收到的传感器量测数据进行序贯处理,基于UKF方法对扩维后的状态向量进行估计,实现了目标状态和空时偏差的同时估计。
  • 基于雷达提示视觉成像的高级驾驶员辅助系统-201580018932.1
  • K.罗森布拉姆;E.达甘 - 御眼视觉技术有限公司
  • 2015-02-20 - 2019-04-23 - G01S13/86
  • 用于车辆的导航系统可以包括配置为获取车辆的环境的多个图像的至少一个图像捕捉装置和检测车辆的环境中的对象并提供包括指示车辆和所述对象之间的范围或范围变化率中的至少一个的范围信息的输出的雷达传感器。所述系统还可以包括至少一个处理装置,被编程为:从所述至少一个图像捕捉装置接收所述多个图像;从所述雷达传感器接收所述输出;对于来自所述多个图像之中第一图像中的多个图像片段的每个以及对于来自所述多个图像之中第二图像中的对应的图像片段,确定光流的指示符。使用基于所述雷达传感器的输出连同对于所述第一图像中的多个图像片段的每个以及所述第二图像中的对应的图像片段确定的所述光流的指示符确定的范围信息,对于多个成像区域的每个计算至少一个指示延伸焦距的值;识别目标对象区域,其包括共享基本上相似的延伸焦距的所述成像区域的至少一个子集;以及基于所识别的目标对象区域引起系统响应。
  • 一种星载大视场远距离快速告警监视系统-201610957300.8
  • 王凤姣;黄勇;刘庆波;魏颖;邹波;周郁;李雁斌 - 上海无线电设备研究所
  • 2016-10-27 - 2019-03-22 - G01S13/86
  • 本发明公开了一种星载大视场远距离快速告警监视系统,包含:雷达收发前端包含一维相控阵天线、接收处理模块、一对光学相机及波控机;接收处理模块、波控机设置在一维相控阵天线的一面上,一对光学相机分别设置在一维相控阵天线与接收处理模块相邻的两个侧面上;一维驱动机构,与一维相控阵天线连接;信号处理组件包含信号处理机、微波源及电源模块;信号处理机分别与一维驱动机构、接收处理模块、一对光学相机、波控机及微波源通信连接;微波源分别与一维相控阵天线、接收处理模块及信号处理机通信连接。本发明用于对远距离、大范围空域可能出现的威胁目标进行搜索捕获和防撞预警,及对视场范围内的威胁目标进行自主测量和运动轨迹拟合。
  • 一种基于微波光学复合的目标探测方法-201611005914.2
  • 胡鑫;黄勇;李雁斌;江利中;周郁;张志俊;邹波 - 上海无线电设备研究所
  • 2016-11-15 - 2019-03-08 - G01S13/86
  • 本发明提供一种基于微波光学复合的目标探测方法,利用微波系统视场宽,不需要剔除背景天体的优势,对微波视场内进行扫描,进行目标初探测,获得目标的距离和方位、俯仰角度信息;根据微波系统测量得到的目标距离以及卫星星历信息,计算并配置光学系统的光暗识别方式、焦距等参数;利用微波系统测量得到的目标方位、俯仰角度信息确定光学系统的角度指向,对目标周围的小视场(光学视场)进行成像;对光学视场内的目标置信度计算;对置信度高的目标进行微波指向确认;确认完成后,按需求对目标进行跟踪。本发明充分利用微波信息和光学信息实现高精度的目标探测。
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

400-8765-105周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top