[发明专利]一种提高大数据队列处理效率的方法和系统在审
| 申请号： | 201611104768.9 | 申请日： | 2016-12-05 |
| 公开（公告）号： | CN108153771A | 公开（公告）日： | 2018-06-12 |
| 发明（设计）人： | 陈辉 | 申请（专利权）人： | 天脉聚源（北京）科技有限公司 |
| 主分类号： | G06F17/30 | 分类号： | G06F17/30 |
| 代理公司： | 暂无信息 | 代理人： | 暂无信息 |
| 地址： | 100007 北京市东*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种提高大数据队列处理效率的方法和系统，该方法包括：S101、数据保存于前端数据库；S102、监听所述前端数据库是否获得新数据，若否，则返回S102；S103、将所述新数据与原有数据进行比较，判断是否重复，若是则转向S102；S104、将原有数据从所述前端数据库转移至备份数据库；S105、将所述新数据进行推送，并对所述推送的数据进行计数，返回S102。本发明技术方案采用卡夫卡队列来建立数据库，对大数据进行高效的存储和提取，提高了数据库推送大数据的效率，简化了技术方案的复杂程度，节约了整体技术方案的成本，提高了数据库检索的综合效率，适应了互联网技术和市场快速发展的需求。 | ||
| 搜索关键词： | 大数据 前端数据库 新数据 推送 队列处理 原有数据 备份数据库 互联网技术 建立数据库 数据库检索 数据保存 整体技术 综合效率 返回 监听 队列 数据库 存储 节约 重复 | ||
【主权项】：
一种提高大数据队列处理效率的方法，其特征在于，包括以下步骤：S101、数据保存于前端数据库；S102、监听所述前端数据库是否获得新数据，若否，则返回S102；S103、将所述新数据与原有数据进行比较，判断是否重复，若是则转向S102；S104、将原有数据从所述前端数据库转移至备份数据库；S105、将所述新数据进行推送，并对所述推送的数据进行计数，返回S102。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于天脉聚源（北京）科技有限公司，未经天脉聚源（北京）科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201611104768.9/，转载请声明来源钻瓜专利网。
- 上一篇：一种搜索引擎加速的方法和系统
- 下一篇：一种免密码登录网页的方法和系统
