[发明专利]一种数据统计方法及系统有效
申请号: | 201811376444.X | 申请日: | 2018-11-19 |
公开(公告)号: | CN109656981B | 公开(公告)日: | 2023-09-15 |
发明(设计)人: | 丁一宁 | 申请(专利权)人: | 南京国通智能科技有限公司 |
主分类号: | G06F16/248 | 分类号: | G06F16/248;G06F16/2458;G06F16/2455 |
代理公司: | 北京轻创知识产权代理有限公司 11212 | 代理人: | 杨立;陈振玉 |
地址: | 210000 江苏省南京市雨*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种数据统计方法及系统,所述方法包括:步骤1,获取业务数据;步骤2,对所述业务数据进行处理,获得用于存储到永久性存储介质中的持久数据,将所述持久数据存储到Kafka集群中;步骤3,根据Spark技术和数据库中预设的统计对象读取所述Kafka集群中的所述持久数据,所述数据库中还预设有统计规则和统计维度,根据所述统计规则和所述统计维度对所述持久数据进行实时流式统计,获得统计结果;步骤4,根据预设的展示方式输出所述统计结果。本发明的技术方案能够大幅提高统计方法及系统的通用性和实时性。 | ||
搜索关键词: | 一种 数据 统计 方法 系统 | ||
【主权项】:
1.一种数据统计方法,其特征在于,所述方法包括:步骤1,获取业务数据;步骤2,对所述业务数据进行处理,获得用于存储到永久性存储介质中的持久数据,将所述持久数据存储到Kafka集群中;步骤3,根据Spark技术和数据库中预设的统计对象读取所述Kafka集群中的所述持久数据,所述数据库中还预设有统计规则和统计维度,根据所述统计规则和所述统计维度对所述持久数据进行实时流式统计,获得统计结果;步骤4,根据预设的展示方式输出所述统计结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京国通智能科技有限公司,未经南京国通智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811376444.X/,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置