[发明专利]基于数据沙箱的数据BI分析方法、系统、介质及设备

说明书

本发明涉及一种基于数据沙箱的数据BI分析方法、系统、介质及设备，其包括：构建数据沙箱，并将所述数据沙箱进行初始化处理；数据资源中心的表资源、库资源及机构资源同步至所述数据沙箱；所述数据沙箱向数据推送中心发送数据同步请求，所述数据推送中心通过请求参数中源端库表信息，进行数据获取，将所获取的数据推送到所述数据沙箱中；由所述数据沙箱将数据进行安全处理后输出，进行数据BI分析处理。本发明的能实现在一个安全的沙箱环境中进行数据处理和查询，兼容异构数据源。

技术领域

本发明涉及一种BI数据分析技术领域，特别是关于一种基于数据沙箱的数据BI分析方法、系统、介质及设备。

背景技术

随着企业中的各部门大数据的需求越来越多，跨部门数据库之间的访问涉及到很多的权限和安全问题，如何在一个安全的沙箱环境中进行数据处理和查询分析变得越来越重要。

发明内容

针对上述问题，本发明的目的是提供一种基于数据沙箱的数据BI分析方法、系统、介质及设备，其能实现在一个安全的沙箱环境中进行数据处理和查询，兼容异构数据源。

为实现上述目的，本发明采取以下技术方案：一种基于数据沙箱的数据BI分析方法，其包括：构建数据沙箱，并将所述数据沙箱进行初始化处理；将数据资源中心的表资源、库资源及机构资源同步至所述数据沙箱；所述数据沙箱向数据推送中心发送数据同步请求，所述数据推送中心通过请求参数中源端库表信息，进行数据获取，将所获取的数据推送到所述数据沙箱中；由所述数据沙箱将数据进行安全处理后输出，进行数据BI分析处理。

进一步，所述构建数据沙箱，包括：

根据用户需求创建项目，在所述项目中创建沙箱空间；

在所述沙箱空间确定表资源，根据使用需求选定目标表，并进行脱敏处理；

在所述沙箱空间内建立异构的数据库表，将异构的数据库中的不同数据库中的不同的表数据全量同步到所述沙箱空间。

进一步，所述根据使用需求选定目标表，并进行脱敏处理，包括：在所述目标表中配置需要脱敏的表的字段，然后选择脱敏的类型，完成脱敏处理。

进一步，所述沙箱空间内设置有空间大小和空间到期时间；对所述空间到期时间设置有时间提醒，根据所述时间提醒对所述数据沙箱中的数据进行清空、删除或创建。

进一步，所述将异构的数据库中的不同数据库中的不同的表数据全量同步到所述沙箱空间，包括：在所述沙箱空间内设定数据增量的同步频率。

进一步，所述将异构的数据库中的不同数据库中的不同的表数据全量同步到所述沙箱空间，包括：

根据数据申请所述沙箱空间，若申请空间额度小于预先设定的限定空间额度，则进行普通申请；反之，则进行特殊申请；

判断所述普通申请和所述特殊申请是否满足审核要求，若满足则将数据同步到所述沙箱空间，进行数据同步、数据上传、数据下载及BI分析。

进一步，所述特殊申请包括：申请所述沙箱空间扩容，或根据所述沙箱空间的空间到期时间进行申请；

所述审核包括对所述沙箱空间申请、所述扩容和空间到期时间的延期进行审核。

一种基于数据沙箱的数据BI分析系统，其包括：数据沙箱构建模块、数据同步模块、数据推送模块和BI分析模块；所述数据沙箱构建模块，构建数据沙箱，并将所述数据沙箱进行初始化处理；所述数据同步模块，将数据资源中心的表资源、库资源及机构资源同步至所述数据沙箱；所述数据推送模块，所述数据沙箱向数据推送中心发送数据同步请求，所述数据推送中心通过请求参数中源端库表信息，进行数据获取，将所获取的数据推送到所述数据沙箱中；所述BI分析模块，由所述数据沙箱将数据进行安全处理后输出，进行数据BI分析处理。