[发明专利]一种流式数据处理方法、系统及一种电子设备和存储介质在审
申请号: | 201810643575.3 | 申请日: | 2018-06-21 |
公开(公告)号: | CN110704480A | 公开(公告)日: | 2020-01-17 |
发明(设计)人: | 黄明远;刘洪政 | 申请(专利权)人: | 马上消费金融股份有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/2453;G06F16/2458 |
代理公司: | 11227 北京集佳知识产权代理有限公司 | 代理人: | 罗满 |
地址: | 401121 重庆市渝北区*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种流式数据处理方法、系统及一种电子设备和存储介质,该方法包括:获取流式数据,并根据匹配规则确定所述流式数据对应的内存中的目标计算模型;根据所述目标计算模型中的处理规则处理所述流式数据,并保存处理结果;判断内存中是否存在到达时间窗口的计算模型,若是,则将所述计算模型对应的处理结果保存至数据库中。本申请提供的流式数据处理方法基于内存的计算模型,在内存接收到流式数据时进行实时计算,确保了流式数据计算的实时性。在面对数据量大、处理规则复杂的流式数据时,将复杂的处理规则预先定义为计算模型,同时利用内存的数据处理能力,实现了计算模型的定义与数据处理的分离,提高了流式数据的处理能力和效率。 | ||
搜索关键词: | 流式数据 计算模型 内存 处理规则 数据处理 目标计算 流式 数据处理能力 保存处理 存储介质 电子设备 匹配规则 时间窗口 实时计算 预先定义 实时性 数据量 申请 数据库 保存 | ||
【主权项】:
1.一种流式数据处理方法,其特征在于,包括:/n获取流式数据,并根据匹配规则确定所述流式数据对应的内存中的目标计算模型;/n根据所述目标计算模型中的处理规则处理所述流式数据,并保存处理结果;/n判断内存中是否存在到达时间窗口的计算模型,若是,则将所述计算模型对应的处理结果保存至数据库中。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于马上消费金融股份有限公司,未经马上消费金融股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810643575.3/,转载请声明来源钻瓜专利网。
- 上一篇:任务处理方法、装置、电子设备及存储介质
- 下一篇:展示数据的方法和装置