[发明专利]一种基于多源时空数据组配的目标辨识方法与系统

说明书

本发明属于数据处理领域，具体涉及一种基于多源时空数据组配的目标辨识方法与系统。本发明包括空间归一化模块、时间归一化模块、用于对原始数据进行标准化处理的数据标准化模块，异源数据连接模块，组配初始化模块和分组结合计数及匹配结果判断模块，以及结果验证模块和历史数据连接及世代审验模块，利用以上模块将信源空间特征归一化，对不同信源的数据进行空间时间维度标准化，以某一选定数据源为驱动，设置其数据标识码为关键字，将与其在同时同地出现的来自其他数据源的数据标识码进行整合和计数。本发明采取先拆分计算再合并结果的方式分步计算，处理海量数据，对设备性能的适应性较高，计算灵活，实时性较高，结果准确。

技术领域

本发明属于数据处理领域，具体涉及一种基于多源时空数据组配的目标辨识方法与系统，油漆是在电力营销、电力生产以及电子政务信息化中的基于多源数据进行目标辨识的技术领域。

背景技术

在电子政务、电力营销与生产等领域中经常出现需要对通过不同种设备采集到的信息进行组配以最终实现目标辨识的工作，如通过不同传感器采集的设备将一个人的各种电子设备与该人员关联起来。相比于传统的数据匹配，这些领域面临着采集设备所处位置不同、采集周期不同、采集到的数据不够精确、噪音数据多、采集到的数据格式不同以及采集到的数据量巨大等问题。

发明内容

针对现有技术中的问题，本发明提供一种基于多源时空数据组配的目标辨识方法与系统，适用于分布式存储的、并发式运算，计算简单、易于理解、容错性高。可以采取先拆分计算再合并结果的方式分步计算，可以处理海量数据，对设备性能的适应性较高，计算灵活，实时性较高，结果准确。

为实现上述目的，本发明是通过以下技术方案实现的：

本发明提供一种基于多源时空数据组配的目标辨识系统，其特殊之处在于，包括对无法准确关联的空间位置信息进行归一化的空间归一化模块、对采集到的连续时间按统一规则进行离散化的时间归一化模块、用于对原始数据进行标准化处理的数据标准化模块，用于将不同来源的数据进行合并的异源数据连接模块，对合并后数据进行处理的组配初始化模块和分组结合计数及匹配结果判断模块，以及对结果进行处理的结果验证模块和历史数据连接及世代审验模块。

进一步地，所述空间归一化模块包括异源空间字典、构建空间关联字典模块、空间标准化模块，所述空间关联字典用于将接入的信源数据与异源空间字典内的字典信息进行关联，所述空间标准化用于根据空间关联字典进行的多源数据空间信息的归一化；

所述构建空间关联字典模块将各信源数据在异源空间字典内的空间字典或空间标记规范作为原始输入数据，依据地理位置的远近进行空间上的拟合关联，使得相近位置的每一个采集设备得到的信源数据都被转换为对应且统一的空间标识代码；

所述空间标准化模块对构建空间关联字典模块传来数据的空间信息以空间字典为依据批量的进行归一化操作。

进一步地，所述时间归一化模块用于将连续时间内所采集数据进行离散化，具体对各个采集设备属性、各个采集设备所采集的数据的属性进行处理，选取时间窗口对空间归一化模块传来的多信源数据依据其时间信息，进行分箱式的离散化操作及数据格式上的归一化。

进一步地，所述数据标准化模块用于对多信源数据进行统一的标准化，通过抛弃无助于组配的噪声数据、以时间和空间信息为主键对待组配的数据标识码进行统合和除重，最终获得格式一致、内存占用较低、便于计算的标准数据。

进一步地，所述异源数据连接模块用于将所有不同来源的数据根据标准的空间和时间标识ID信息进行连接、过滤掉对组配没有贡献的数据以及白噪声数据。

进一步地，所述组配初始化模块用于将数据包装为最终格式，包括对选定的数据集合执行扩展操作、初始化用于记录每个数据标识码匹配次数的组配计数器、初始化用于记录匹配批次总数的总计数器、初始化用于控制数据生命周期的世代计数器。