[发明专利]历史数据异常分析方法、系统、设备及存储介质在审
申请号: | 201811638145.9 | 申请日: | 2018-12-29 |
公开(公告)号: | CN109669931A | 公开(公告)日: | 2019-04-23 |
发明(设计)人: | 陈宇;凌云;杨再三;刘丹青;艾青;章锦成;任华炯 | 申请(专利权)人: | 上海携程商务有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/22 |
代理公司: | 上海隆天律师事务所 31282 | 代理人: | 臧云霄;夏彬 |
地址: | 200335 上海市长*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种历史数据异常分析方法、系统、设备及存储介质,该方法包括:采用Spark Streaming拉取待分析的历史数据至数据缓存;将待分析的历史数据存储至数据库;执行各个Spark任务集群,各个所述Spark任务集群执行绑定的各个规则,根据绑定的各个规则从所述数据缓存中拉取和处理待分析的历史数据,并为处理后的历史数据添加分类标签;根据处理后的历史数据的分类标签对所述数据库中的历史数据添加分类标签。采用本发明的技术方案,基于Spark实现历史数据异常分析,支持规则和任务集群的实时添加和更新,提高数据统计分析效率。 | ||
搜索关键词: | 历史数据 分类标签 异常分析 任务集 存储介质 数据缓存 绑定 拉取 数据库 历史数据存储 数据统计分析 分析 更新 | ||
【主权项】:
1.一种历史数据异常分析方法,其特征在于,包括如下步骤:采用Spark Streaming拉取待分析的历史数据至数据缓存;将待分析的历史数据存储至数据库;执行各个Spark任务集群,各个所述Spark任务集群执行绑定的各个规则,根据绑定的各个规则从所述数据缓存中拉取和处理待分析的历史数据,并为处理后的历史数据添加分类标签;根据处理后的历史数据的分类标签对所述数据库中的历史数据添加分类标签。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海携程商务有限公司,未经上海携程商务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811638145.9/,转载请声明来源钻瓜专利网。