[发明专利]基于数据库日志的实时数据查询方法和系统有效
| 申请号： | 201610075127.9 | 申请日： | 2016-02-03 |
| 公开（公告）号： | CN107038162B | 公开（公告）日： | 2021-03-02 |
| 发明（设计）人： | 艾毅 | 申请（专利权）人： | 北京嘀嘀无限科技发展有限公司 |
| 主分类号： | G06F16/23 | 分类号： | G06F16/23;G06F16/2458;G06F16/27 |
| 代理公司： | 北京友联知识产权代理事务所(普通合伙) 11343 | 代理人： | 尚志峰;汪海屏 |
| 地址： | 100193 北京*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明涉及基于数据库日志的实时数据查询方法和系统，包括：获取主数据库的增量日志信息；对所述增量日志信息进行解析，得到增量数据信息，并将所述增量数据信息存储在kafka消息队列中；通过druid从所述kafka消息队列中读取所述增量数据信息，并根据预定义的索引规则构建所述增量数据信息的实时查询索引；利用所述实时查询索引进行实时数据查询。通过采用本发明所提供的基于数据库日志的实时数据查询方法，以主数据库的binlog日志作为数据源，使用kafka作为消息队列，使用druid作为分布式索引和查询引擎进行实时数据查询，从而降低数据收集和数据查询分析的延迟，数据查询耗时从原来的数分钟降低到了毫秒级别，提升了用户体验。 | ||
| 搜索关键词： | 基于 数据库 日志 实时 数据 查询 方法 系统 | ||
【主权项】：
一种基于数据库日志的实时数据查询方法，其特征在于，包括：获取主数据库的增量日志信息；对所述增量日志信息进行解析，得到增量数据信息，并将所述增量数据信息存储在kafka消息队列中；通过druid从所述kafka消息队列中读取所述增量数据信息，并根据预定义的索引规则构建所述增量数据信息的实时查询索引；利用所述实时查询索引进行实时数据查询。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京嘀嘀无限科技发展有限公司，未经北京嘀嘀无限科技发展有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201610075127.9/，转载请声明来源钻瓜专利网。
- 上一篇：一种氨纶卷绕机卷绕装置
- 下一篇：纱线导向器
