[发明专利]一种智能视觉感知处理方法、装置及智能视觉感知物联网终端

说明书

本发明实施例提供了一种智能视觉感知处理方法、装置及智能视觉感知物联网终端，可以解决视觉感知与物联网决策过度依赖云端、过度中心化问题，利用云计算与边缘计算的结合，将部分算力部署于边缘侧的智能视觉感知物联网终端，同时将物联网传感数据与视觉感知判断数据综合后多维度决策，即可传输至云端服务器亦可边缘侧决策控制相应装置，从而解决物联网智能化问题。

技术领域

本发明涉及智能控制计算领域，具体而言，涉及一种智能视觉感知处理方法、装置及智能视觉感知物联网终端。

背景技术

视觉感知技术是用机器代替人眼来做测量和判断，对摄像机采集的视频及图像内容进行分析理解，包括目标检测、目标跟踪、行为分析等内容，分析后的结果通过特定的逻辑判断对相应的解析事件作出特定动作（包括指挥控制其他机器或系统、辅助系统决策、报警等）。

当前方案中视频压缩编码由摄像机完成，而视频的解码、视频解析算法由视频服务器完成，随着边缘侧摄像机规模数量的逐步增大，将对云端服务器尤其是GPU的整体处理能力、传输网接口侧带宽造成巨大的压力。当前方案中摄像机传输编码后视频图像，对传输网络的带宽提出非常高的要求，由于带宽所限亦限制摄像机的布设。当前物联网的主要问题集中在过高的中心化，物物相连过度依赖中心决策，终端侧智能判断较少，或者感知、或者执行。中心化的问题包括：中心可靠性风险、传输可靠性、可行性风险、响应时间风险等。

发明内容

有鉴于此，本发明实施例的目的在于提供一种智能视觉感知处理方法、装置及智能视觉感知物联网终端，可以解决视觉感知与物联网决策过度依赖云端、过度中心化问题，利用云计算与边缘计算的结合，将部分算力部署于边缘侧的智能视觉感知物联网终端，同时将物联网传感数据与视觉感知判断数据综合后多维度决策，即可传输至云端服务器亦可边缘侧决策控制相应装置，从而解决物联网智能化问题。

根据本发明实施例的一个方面，提供一种智能视觉感知处理方法，应用于智能视觉感知物联网终端，所述智能视觉感知物联网终端位于通信网络的边缘侧，并通过以太网与摄像机通信连接，同时通过串口通信接口与现场的传感器设备和控制装置通信连接，所述方法包括：

接收所述摄像机采集的视频图像信息；

对所述视频图像信息进行解压编码，得到对应的解压编码数据，并按照特定的指令解析策略对所述解压编码数据进行解析处理，将解析处理结果与所述传感器设备采集的传感数据进行比对分析，得到控制指令集合；

根据所述控制指令集合控制所述控制装置执行对应的现场控制动作，并将基于执行的现场控制操作过程中获得的所述解压编码数据和所述传感数据以及所述控制指令集合发送给云端服务器进行数据备份和展示。

可选地，所述按照特定的指令解析策略对所述解压编码数据进行解析处理，将解析处理结果与所述传感器设备采集的传感数据进行比对分析，得到控制指令集合的步骤，包括：

对所述解压编码数据中至少一组解压编码数据段进行解析处理，通过多次循环解析处理提取出至少一组运行状态参数节点的状态变化矩阵；

对至少一组所述状态变化矩阵进行特征提取，得到所述解压编码数据段的特征提取轨迹，所述特征提取轨迹用于表征运行状态参数节点的特征变化向量；

对所述至少一组状态变化矩阵进行指令比对分析，得到所述解压编码数据段的指令比对分析曲线图，所述指令比对分析曲线图用于表征运行状态参数节点的指令比对分析向量；

当所述解压编码数据段包括至少两组待监测运行状态参数节点时，对于所述解压编码数据段中的每一组待监测运行状态参数节点，基于所述特征提取轨迹以及所述指令比对分析曲线图，采用预设的指令模拟控件对所述待监测运行状态参数节点进行指令模拟，得到模拟指令集合；

在预设的数据库查找与所述模拟指令集合相匹配的目标模拟指令集合，得到当前查找结果；