[发明专利]一种增强非关系型数据库分析能力的数据处理平台有效
申请号: | 201710740667.9 | 申请日: | 2017-08-25 |
公开(公告)号: | CN107491544B | 公开(公告)日: | 2020-12-29 |
发明(设计)人: | 杨锐 | 申请(专利权)人: | 上海德拓信息技术股份有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/2453;G06F16/28 |
代理公司: | 上海宣宜专利代理事务所(普通合伙) 31288 | 代理人: | 刘君 |
地址: | 200233 上海*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种增强非关系型数据库分析能力的数据处理平台,包括:非关系型数据库集群,所述非关系型数据库集群连接于数据分析服务模块、应用服务层,所述非关系型数据库集群与数据分析服务模块之间依次设有数据连接服务模块、Spark分布式计算集群、数据缓存服务模块、数据处理服务模块,数据连接服务模块提供对待查数据进行连接操作,进而,将初步处理后的待分析数据推送到数据缓存服务模块,之后,数据处理服务模块对待查询数据进行进一步的定向优化处理,然后,数据分析服务模块接收最终的数据进行查询分析。本发明可以让应用层无需对find方法或Query DSL查询语法熟练掌握,仅需使用标准SQL查询语法就能轻松的享受到完整的分析查询体验。 | ||
搜索关键词: | 一种 增强 关系 数据库 分析 能力 数据处理 平台 | ||
【主权项】:
一种增强非关系型数据库分析能力的数据处理平台,包括:非关系型数据库集群,所述非关系型数据库集群连接于数据分析服务模块、应用服务层,所述非关系型数据库集群使用find方法或Query DSL语法连接通讯应用服务层,数据分析服务模块分析结果返回非关系型数据库集群,其特征在于:所述非关系型数据库集群与数据分析服务模块之间依次设有数据连接服务模块、Spark分布式计算集群、数据缓存服务模块、数据处理服务模块,数据连接服务模块提供对待查数据进行连接操作,进而,将初步处理后的待分析数据推送到数据缓存服务模块,之后,数据处理服务模块对待查询数据进行进一步的定向优化处理,然后,数据分析服务模块接收最终的数据进行查询分析,依托于服务内的Spark集群提供稳定可靠的服务。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海德拓信息技术股份有限公司,未经上海德拓信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710740667.9/,转载请声明来源钻瓜专利网。