[发明专利]一种基于数据分类的数据总线

说明书

本发明提供了一种基于数据分类的数据总线，数据总线按照数据结构种类被划分为多个数据空间，每一类数据结构对应一个数据空间，每个数据空间对应一个接口基类和多个接口子类，各接口子类通过继承相应数据空间中的接口基类进行本数据总线与相应数据结构种类的子类数据结构之间的对接。在数据总线中按照数据结构种类划分数据空间，每个数据空间对应于多种子类型数据结构，用户在操作数据时，只需要区分数据属于哪一大类，无需细分到具体的数据类别，方便用户的使用，同时方便用户扩展新的数据类型，无需进行重写。

技术领域

本发明属于数据接口技术领域，尤其是涉及一种基于数据分类的数据总线。

背景技术

随着计算机技术、网络技术的迅速发展，人们获取与处理空间数据的能力正在不断提高，拥有的空间信息量占信息总量的80％。多源异构的空间数据给数据综合利用和数据共享带来不便，成为空间信息共享的瓶颈。如何有效、实时、快速的实现对多源异构数据的分类与归纳应用成为了亟待解决的问题。

数据湖是以自然格式存储数据的系统。数据湖通常被作为所有企业数据的单一存储库，可存储任何格式任何形式的数据，包括源系统数据的原始副本和用于报告、可视化、分析和机器学习等任务的转换数据。数据湖的出现解决了存储层问题，使数仓进化到数据湖，不需要单独部署，而是直接依附于计算引擎。但是，目前的数据湖没有一个基于数据分类的数据总线能够为数据湖提供数据湖与数据源之间数据交互管理，数据湖支持数据类型十分有限，且不便于数据类型的扩展。若用户希望增加数据湖支持的数据类型，则需要对数据湖进行重写，无法高效复用数据湖已有的数据接口，在增减数据类型时需要消耗大量的时间精力来对数据湖进行接口重写。

发明内容

本发明的目的是针对上述问题，提供一种基于数据分类的数据总线。

为达到上述目的，本发明采用了下列技术方案：

一种基于数据分类的数据总线，数据总线按照数据结构种类被划分为多个数据空间，每一类数据结构对应一个数据空间，每个数据空间对应一个接口基类和多个接口子类，各接口子类通过继承相应数据空间中的接口基类进行本数据总线与相应数据结构种类的子类数据结构之间的对接。

在上述的基于数据分类的数据总线中，所述的数据空间包括结构化数据空间、半结构化数据空间、非结构化数据空间和二进制数据空间；

结构化数据空间对应的数据结构种类为结构化数据类，半结构化数据空间对应的数据结构种类为半结构化数据类，非结构化数据空间对应的数据结构种类为非结构化数据类，二进制数据空间对应的数据结构种类为二进制数据类；

结构化数据类对应的子类数据结构为各种关系型数据库类，包括MySQL、Oracle、SQLServer、DB2；

半结构化数据类对应的子类数据结构为各种非关系型数据库类，包括Mongo、Neo4j、Hbase和Redis；

非结构化数据类对应的子类数据结构包括文件、文本、视频、音频、图像；

二进制数据类对应的子类数据结构包括二进制文件、编码数据。

在上述的基于数据分类的数据总线中，结构化数据空间对应有结构化数据接口基类和多种关系型数据接口子类，每种关系型数据接口子类均通过继承结构化数据接口基类与相应关系型数据库实现对接；

半结构化数据空间对应有半结构化数据接口基类和多种非关系型数据接口子类，每种非关系型数据接口子类均通过继承半结构化数据接口基类与相应非关系型数据实现对接；

非结构化数据空间对应有非结构化数据接口基类和多种非结构化数据接口子类，每种非结构化数据接口子类均通过继承非结构化数据接口基类与相应非结构化数据实现对接；

二进制数据空间对应有二进制接口基类和多种二进制数据接口子类，每种二进制数据接口子类均通过继承二进制接口基类与相应二进制数据的对接。