[发明专利]数据空值处理方法、装置及终端设备

说明书

本发明适用于数据处理技术领域，提供了一种数据空值处理方法、装置及终端设备，所述方法包括：从数据源中采集原始数据，并对所述原始数据进行预处理，得到预处理数据；对所述预处理数据进行空值检测；若所述预处理数据中存在空值，则根据第一空值的属性类型及所述预处理数据中数值的平均值填充所述第一空值，所述第一空值为所述预处理数据中任一空值。本发明有效利用空值所蕴含的信息，根据空值的属性类型对预处理数据进行求平均处理，利用计算得到的平均值来填充空值，从而排除一些无用的数据，提高空值处理效率。

技术领域

本发明属于数据处理技术领域，尤其涉及一种数据空值处理方法、装置及终端设备。

背景技术

在现实中，由于操作问题、仪器问题、系统问题等原因，在数据中普遍存在空缺数据情况。

目前，国内外已提出很多有关缺失值填充的方法。尽管这些方法在各自的应用环境下得到了很好的效果，但仍然存在一些不足，传统的空值处理方法不能有效利用空值中所蕴含的信息，引用一些无用的数据，导致空值处理效率低下的问题。

发明内容

有鉴于此，本发明实施例提供了一种数据空值处理方法、装置及终端设备，以解决现有技术中空值填充时引用一些无用的数据而导致的效率低下的问题。

本发明实施例的第一方面提供了一种数据空值处理方法，包括：

从数据源中采集原始数据，并对所述原始数据进行预处理，得到预处理数据；

对所述预处理数据进行空值检测；

若所述预处理数据中存在空值，则根据第一空值的属性类型及所述预处理数据中数值的平均值填充所述第一空值，所述第一空值为所述预处理数据中任一空值。

本发明实施例的第二方面提供了一种数据空值处理装置，包括：

预处理数据获取模块，用于从数据源中采集原始数据，并对所述原始数据进行预处理，得到预处理数据；

空值检测模块，用于对所述预处理数据进行空值检测；

空值填充模块，用于若所述预处理数据中存在空值，则根据第一空值的属性类型及所述预处理数据中数值的平均值填充所述第一空值，所述第一空值为所述预处理数据中任一空值。

本发明实施例的第三方面提供了一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上所述数据空值处理方法的步骤。

本发明实施例的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如上所述数据空值处理方法的步骤。

本发明实施例与现有技术相比存在的有益效果是：本发明实施例提供的数据空值处理方法首先从数据源中采集原始数据，并对所述原始数据进行预处理，得到预处理数据；对所述预处理数据进行空值检测；若所述预处理数据中存在空值，则根据第一空值的属性类型及所述预处理数据中数值的平均值填充所述第一空值，所述第一空值为所述预处理数据中任一空值。本发明实施例有效利用空值所蕴含的信息，根据空值的属性类型对预处理数据进行求平均处理，利用计算得到的平均值来填充空值，从而排除一些无用的数据，提高空值处理效率。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的数据空值处理方法的流程示意图；

图2是本发明实施例提供的图1中S103的具体实现流程示意图；