[发明专利]一种数据应用共享平台及方法

摘要

本发明属于大数据数据共享服务的信息信息技术领域，公开了一种数据应用共享平台及方法，快速获取数据和动态生成查询统计、分析报表的数据服务能力和可视化，屏蔽大数据环境下复合异构数据存取的复杂度；平台包括：数据同步单元、数据协作单元、高并发访问单元、数据源动态适配单元、动态查询单元、动态报表单元、元数据应用单元和上层支撑应用单元。本发明实施运营后，减轻了生产业务系统数据层和应用层的整合难度，同时解决业务应用中繁琐而重复的查询统计和分析报表开发，提升开发效率和降低开发成本。

主权项

1.一种数据应用共享平台，其特征在于，所述数据应用共享平台，包括：数据同步单元，用于基于事务数据库Bin‑log或业务应用数据消息同步到MQ中间件，通过消息订阅再分别同步到分析式大数据存储服务器和全文索引服务器，为后续数据处理提供全量数据准备；数据协作单元，用于基于大数据离线计算和实现流计算，进一步对数据进行ETL处理和MQ消息通知协作，输出构建数仓和数据集市，热点数据、画像数据、高粒度的汇聚结果数据输出到对应的缓存服务器、全文索引服务器或结果数据库，以备后续查询；高并发访问单元，用于结合分布式缓存和分布式全文索引中间件的高并发特性，为上层提供数据查询服务，确保高并发访问能力；数据源动态适配单元，用于并为每一数据源命名唯一的Domain Code，与上层查询脚本进行配置绑定，实现动态数据源适合和访问能力；动态查询单元，用于借鉴MyBatis动态SQL原理构建，但不局限于JDBC SQL的配置与解析，还支持查询脚本、MongoDB Bson查询脚本的配置与解析，每一个查询脚本分配一个全局唯一Id，作为对外访问调用标识，同时也做为鉴权标识，真实请求时再传入查询参数；动态报表单元，用于以动态查询为基础，配置一个或多查询作为报表的初始数据，再配置定义报表呈现区域块数据，现支持的呈现区域块有：指标数组区域块、DataGrid表格区域块和图形区域块；每一个报表分配一个全局唯一Id，作为对外访问调用标识，同时也做为鉴权标识，真实请求时再传入查询参数及可；元数据应用单元，分为技术元数据、对照元数据和业务元数据，组合应用及用于动态生成界面交互的输入、输出参数控件，及数据的个性化呈现与规则约束检查；同时元数据或应用于数据同步与协作期间的规则约束检查；支撑应用单元，用于确保能长期稳定的对上层应用提供数据服务，将平台拆分为查询读应用和管理写应用。