[发明专利]用于计算近实时数据聚集的搜索和检索数据处理系统有效
申请号: | 201680075432.6 | 申请日: | 2016-12-20 |
公开(公告)号: | CN108780466B | 公开(公告)日: | 2023-08-11 |
发明(设计)人: | J.麦克莱恩;P·维塞尔 | 申请(专利权)人: | 起元技术有限责任公司 |
主分类号: | G06F17/40 | 分类号: | G06F17/40;G06F11/34;G06F11/30 |
代理公司: | 北京林达刘知识产权代理事务所(普通合伙) 11277 | 代理人: | 刘新宇 |
地址: | 美国马*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 计算 实时 数据 聚集 搜索 检索 数据处理系统 | ||
1.一种用于处理数据的数据处理系统所进行的方法,所述方法包括:
间歇地接收来自一个或多个数据流的数据,其中所接收到的数据包括数据记录;
随着继续接收来自所述一个或多个数据流的数据,
检测所接收到的数据记录中的两个或多个特定数据记录,其中所检测到的两个或多个特定数据记录各自包括特定标识符,
针对该特定标识符,
创建包括所检测到的两个或多个特定数据记录的数据记录的集合;
针对数据记录的所述集合中所包括的至少一个特定数据记录,
搜索数据记录以获得与所述特定标识符相关联的数据的历史聚集,其中所述历史聚集是从先前时间段预计算出的数据聚集,以及
基于所述至少一个特定数据记录和所述历史聚集来计算组合数据,
通过将所述组合数据插入数据记录的字段中、并且通过将来自所述集合中的数据记录至少之一的数据插入到该数据记录的另一字段中,来修改该数据记录;
通过对修改后的数据记录应用一个或多个规则,来处理所述修改后的数据记录,其中,每个这样的规则包括条件,所述条件的满足导致动作的执行;
基于应用所述规则,向存储器写入用于发起一个或多个动作的一个或多个指令;以及
将所述一个或多个指令发布至队列以发起所述一个或多个动作。
2.根据权利要求1所述的方法,其中,将来自所述集合中的数据记录至少之一的数据插入到该数据记录的另一字段中包括:
将来自所述集合中所包括的所述至少一个特定数据记录的数据插入到通过插入而修改的数据记录的另一字段中。
3.根据权利要求1所述的方法,其中,数据记录的所述集合是包括来自数据记录的数据的第一数据记录,以及所述方法还包括:
收集多个数据记录;
将所述数据记录发布至单个队列;
从所述队列中检测所述两个或多个特定数据记录;
将所述两个或多个特定数据记录一起联接到所述第一数据记录中,其中所述两个或多个特定数据记录包括表示为不同类型的事件的数据;以及
利用针对所述至少一个特定数据记录的组合数据来增强所述第一数据记录。
4.根据权利要求1所述的方法,其中,所述先前时间段是进行检测之前的时间。
5.根据权利要求3所述的方法,其中,还包括:
向所述第一数据记录附加与所述第一数据记录中所包括的特定事件相关联的客户的客户简档数据;以及
向所述第一数据记录附加具有针对所述特定事件的历史聚集的可附加查找文件即ALF。
6.根据权利要求1所述的方法,其中,计算组合数据包括:
向所述历史聚集添加增量数据,其中所述增量数据包括从计算出所述历史聚集的时间到近当前时间的数据,所述近当前时间距当前时间在一分钟内;以及
基于所述增量数据的添加,产生数据的近实时聚集。
7.根据权利要求1所述的方法,其中,还包括:
从用户的客户端装置接收表示用于定义应用的一个或多个规则的数据;
基于所接收到的数据生成用于定义应用的一个或多个规则;以及
基于执行所述一个或多个规则,针对间歇地接收到的一个或多个数据流实现该应用。
8.根据权利要求1所述的方法,其中,接收所述一个或多个数据流包括:
接收具有表示第一类型的事件的数据的第一数据流;以及
接收具有表示第二类型的事件的数据的第二数据流。
9.根据权利要求1所述的方法,其中,还包括:针对所述一个或多个指令中所包括的发布动作触发器执行一个或多个应用。
10.根据权利要求1所述的方法,其中,数据记录包括事件。
11.根据权利要求1所述的方法,其中,搜索包括在数据存储库中进行搜索或者在存储器中进行搜索。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于起元技术有限责任公司,未经起元技术有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201680075432.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于操作排序的基于属性的依赖性识别
- 下一篇:传输门的布局及相关系统和技术
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置