[发明专利]实时数据仓库、实时数据处理方法、电子设备及存储介质有效
| 申请号： | 201810097398.3 | 申请日： | 2018-01-31 |
| 公开（公告）号： | CN108427711B | 公开（公告）日： | 2019-09-17 |
| 发明（设计）人： | 杨德臣 | 申请（专利权）人： | 北京三快在线科技有限公司 |
| 主分类号： | G06F16/2455 | 分类号： | G06F16/2455;G06F16/28 |
| 代理公司： | 北京润泽恒知识产权代理有限公司 11319 | 代理人： | 莎日娜 |
| 地址： | 100083 北京市海*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本申请提供了一种实时数据仓库，属于计算机技术领域，解决了现有技术中的实时数据仓库可扩展性差，开发效率底下的问题。所述实时数据仓库至少包括以下自底向上依次设置的三层：源数据层，用于实时获取并存储业务系统的数据；多维明细层，用于基于预设维度对所述源数据层的数据进行处理，并存储处理后的数据；应用层，用于响应数据库操作，对所述多维明细层存储的数据进行处理，并输出处理后的数据；其中，各层内通过实时数据处理技术对数据进行处理，各层之间通过消息队列和/或缓存数据库进行数据传输。通过按照数据处理的流程，结合业务特点，对数据处理流程分层，简化了数据处理的复杂度，有利于提高数据仓库开发效率。 | ||
| 搜索关键词： | 实时数据 仓库 实时数据处理 开发效率 数据处理 源数据 多维 计算机技术领域 数据处理流程 缓存数据库 数据库操作 存储处理 存储介质 存储业务 电子设备 可扩展性 实时获取 输出处理 数据仓库 数据传输 消息队列 业务特点 依次设置 复杂度 应用层 分层 三层 维度 预设 存储 响应 申请 | ||
【主权项】：
1.一种实时数据仓库，其特征在于，至少包括以下自底向上依次设置的三层：源数据层，用于通过消息队列获取并存储业务系统的实时数据，还用于获取离线维度数据并存储至所述源数据层对应的缓存数据库；多维明细层，用于根据所述离线维度数据对所述源数据层的实时数据进行处理，并将处理后的数据存储到所述多维明细层对应的消息队列或缓存数据库；应用层，用于响应数据库操作，对所述多维明细层存储的数据进行处理，并输出处理后的数据；其中，各层之间通过消息队列和/或缓存数据库进行数据传输；所述多维明细层以上的各层分别包括至少一个实时数据处理模块，所述至少一个实时数据处理模块用于处理相应主题的数据；所述实时数据处理模块包括：至少一个实时数据处理函数、与所述实时数据处理函数一一对应的消息队列或缓存区域；所述实时数据处理函数用于处理相应实体的数据。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京三快在线科技有限公司，未经北京三快在线科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201810097398.3/，转载请声明来源钻瓜专利网。
- 上一篇：企业数据可视化处理方法、服务器和存储介质
- 下一篇：一种实现大数据安全的系统
