[发明专利]数据类型的确定方法、装置、电子设备及存储介质

说明书

本申请提出了一种数据类型的确定方法、装置、电子设备及存储介质，其中，方法包括：获取待识别的目标数据项的多维数据特征，以及至少一个标准数据类型的多维标识信息；根据多维标识信息和多维数据特征之间的关联度，从至少一个标准数据类型中，确定目标数据项所属的候选数据类型和对应的候选概率；根据候选概率，从候选标准数据类型中确定目标数据项所属的目标数据类型。本申请中，通过其他维度的数据特征实现异常数据项所属数据类型的确定，避免了人工研判，缩短了数据类型的确认时间，实现了数据类型的标准化判定，节约了人工成本，提高了数据类型确认的效率。

技术领域

本申请涉及数据处理领域，尤其涉及一种数据类型的确定方法、装置、电子设备及存储介质。

背景技术

随着技术的发展，大数据提供的服务对于人们日常的工作生活越加重要，其中，可以通过大数据平台实现对人们的工作、生活的大数据服务的提供。

在大数据平台搭建的过程中，存在从其他相关系统中抽取数据的业务需求，因此，需要对不同的系统中获取的数据进行统一化、规范化的识别和定义，在该过程中，存在部分数据的数据类型维度信息存在缺失，相关技术中可以通过人工研判对该部分异常数据的识别和定义，人工成本高，处理时间较长。

发明内容

本申请旨在至少在一定程度上解决相关技术中的技术问题之一。

为此，本申请第一方面提出一种数据类型的确定方法。

本申请第二方面还提出一种数据类型的确定装置。

本申请第三方面提出一种电子设备。

本申请第四方面提出一种计算机可读存储介质。

本申请第五方面提出一种计算机程序产品。

本申请第一方面提出一种数据类型的确定方法，包括：获取待识别的目标数据项的多维数据特征，以及至少一个标准数据类型的多维标识信息；根据多维标识信息和多维数据特征之间的关联度，从至少一个标准数据类型中，确定目标数据项所属的候选数据类型和对应的候选概率；根据候选概率，从候选标准数据类型中确定目标数据项所属的目标数据类型。

另外，本申请第一方面提出的数据类型的确定方法，还可以具有如下附加的技术特征：

根据本申请的一个实施例，根据多维标识信息和多维数据特征之间的关联度，从至少一个标准数据类型中，确定目标数据项所属的候选数据类型和候选数据类型对应的候选概率分布，包括：根据目标数据项在元数据维度上的第一数据特征和标准数据项在元数据维度上的第一标识信息之间匹配度，获取目标数据项所属的第一数据类型和对应的第一概率；根据目标数据项在数据内容维度上的第二数据特征，和标准数据项在数据内容维度上的第二标识信息之间语义相似度，获取目标数据项所属的第二数据类型和对应的第二概率；根据目标数据项和标注数据项的已标注数据类型，获取目标数据项所属的第三数据类型和对应的第三概率；将第一数据类型、第二数据类型、第三数据类型的并集，确定为目标数据项所属的候选数据类型，并根据第一概率、第二概率和第三概率获取候选数据类型对应的候选概率。

根据本申请的一个实施例，根据目标数据项在元数据维度上的第一特征和标准数据项在元数据维度上的第一标识之间的匹配度，获取目标数据项所属的第一数据类型和对应的第一概率，包括：获取多维标识信息中，属于标准数据类型在元数据维度上的第一标识信息；从多维数据特征中，获取目标数据项的元数据维度上的第一数据特征；根据第一标识信息和第一数据特征的匹配度，确定目标数据项所属的第一数据类型和对应的第一概率。