[发明专利]一种基于大数据的应急物资数据存储及流通监测方法

说明书

本发明公开了一种基于大数据的应急物资数据存储及流通监测方法。本发明设置一任务节点，将物流络中的计算节点形成计算环；任务节点根据收到的任务请求，从数据库中提取对应的进出库物资记录数据；并将其中的库对象作为分析对象与数据集进行分离；任务节点对计算环中的计算节点进行哈希处理后与所述分析对象进行映射，为每一计算节点分配一分析对象分割集；计算节点从收到的分析对象分割集中提取需要处理的分析对象，然后获取该分析对象与物流网中其他具有物资转运关系的库物资记录数据；然后根据收到的任务对象对该库物资记录数据进行异常检查，并将检查结果发送给任务节点。本发明能够对数据进行快速分析与监控。

技术领域

本发明涉及物资流通大数据分析研究与应用领域，具体涉及一种基于大数据的应急物资数据存储及流通监测方法。针对应急工作特点以及物流信息管理与监控的需求，本发明以Key-Value列数据(HBase)为基础存储环境，基于并行架构实现支持层次化网络中P2P关系的快速分析，实现物流动态网络中路径、收发以及运输异常的高性能识别与分析技术。本发明在交通、航空、灾害防控、环境保护、人流监控、物流追溯等方面具有积极的应用价值。

背景技术

应急物资(Emergency Supplies)是指为应对严重自然灾害、突发性公共卫生事件、公共安全事件及军事冲突等突发公共事件应急处置过程中所必需的保障性物质。其主要包括以下类别：

●生命保障：此类物资主要包括用于灾区群众生命、健康保障物资，包括饮用水、食品、药品、帐篷等；

●救援装备：此类物资主要用于灾区救援工作，主要包括救援工程机械、应急通讯保障设备等；

应急物资是突发事故应急救援和处置的重要物质支撑。以地震为例，在应急处置工作中，需要集结大量各种类别应急资源。根据应急指挥统一调度、运输、分发。由于应急物资具有较大针对性，例如：药品针对伤员救助需求、食品\饮用水针对灾区人员安置需求、大型装备针对抢险救灾需求等。因此，针对应急工作特点建立高性能物流管理与信息服务系统是必须的。通过这一系统可以实现海量应急物资数据的统一管理、高性能查询、追溯以及实时异常检测等工作。为应急处置活动的顺利开展奠定基础。应急物流的管理离不开物资对象与物流网络两个基本元素。在应急工作中，这两个元素呈现以下两方面的特点

1.物资对象批量化组织：根据应急工作的特点，通常需要集结较大数量的同类物资。通过批次化的组织方式实现运输与分发。通常以批次为基础，针对个体对象进行统一的处置。在应急物资的管理活动中，批次化的组织方式是实现应急物资流通信息管理，跟踪以及异常发现的基础；

2.应急流通节点体系层次化与物流网络树形化：结合国家有关应急管理制度的要求。通常在灾区形成以省-市-县行政级别为层次的物资集散分发体系。在物资流通过程中，根据应急需求分批、分组定向运输，既而形成层次化、多流向的流通组织方式。

基于以上特点，应急物资流通的监测，主要包括在以下三个方面：

1.应急物资的流通网络监测：即为应急物资流通网络中的流通节点之间的层次关系的监测。根据管理与调度工作的要求，应急物资自一级流通节点依次向下一级节点流通，不允许同一级节点之间相互流通、跨等级流通以及不同的行政区域之间的流通。通常情况下，由于应急工作混乱、信息沟通不畅等原因，会发生物资转运错误的情况，因此需要在监控工作中针对全网范围物资的流向路径进行检查，消除流通错误的情况。

2.监控物资运输的异常：由于应急工作的特点，物流管理工作需要跟踪每一批次、每一分组物资的运输，及时发现由于各种原因导致的物资丢失、物资运输失效等情况；

3.基于批次的应急物资跟踪、溯源与异常发现：物资对象以批次为单位实现分发。在分发过程中经过分组，分发到不同节点。在物资流通过程中，根据不同节点物资分发与到达的数量统计，发现应急物流网络中的异常情况；可以快速追溯发生滞留、误操作的节点。同时，也可以基于时间针对物流情况进行统计，分析整个网络中物流工作的效率，协助决策优化。