[发明专利]基于storm面向用户个性化预警机制大数据计算方法在审
| 申请号: | 201710108940.6 | 申请日: | 2017-02-27 |
| 公开(公告)号: | CN106951464A | 公开(公告)日: | 2017-07-14 |
| 发明(设计)人: | 张启亮;王飞;朱晓委;张毅;邵世龙 | 申请(专利权)人: | 江苏徐工信息技术股份有限公司 |
| 主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F11/30 |
| 代理公司: | 徐州市三联专利事务所32220 | 代理人: | 周爱芳 |
| 地址: | 221000 江苏省徐*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 storm 面向 用户 个性化 预警 机制 数据 计算方法 | ||
1.一种基于storm面向用户个性化预警机制大数据计算方法,其特征在于,包括数据预处理模块、数据解析模块、数据存储模块和报警处理模块;
数据预处理模块包括服务器网关和kafka消息队列,kafka消息队列负责服务网关数据与解析数据的桥梁,服务器网关从获取终端发来的原始数据存入kafka的topic中,作为数据解析模块处理的生产者;
数据解析模块为storm解析模块,负责从kafka的topic中读取数据,并对topic中的原始数据根据协议定义进行解析;其中,storm的数据处理机制是流式处理,对数据进行逐条解析;
数据存储模块包括数据缓存模块、缓存数据库更新模块和历史报警存储模块;
报警处理模块为storm报警模块,一方面,从数据缓存模块中获取用户自定义报警方案,另一方面,根据这些报警方案分析出报警逻辑,并且分析出报警结果;
基于storm面向用户个性化预警机制大数据计算方法的具体步骤是:
步骤一、用户通过界面按照自身设备设置报警逻辑,设置成功后,系统将会按照约定的数据结构存储报警逻辑的参数和阈值;
步骤二、数据缓存模块定时的从数据库中读取步骤一中存储的数据结构,并用于下一步storm报警模块;其中,定时的时间可由用户自己设定;
步骤三、storm报警模块结合从数据缓存模块读取报警所需的参数和阈值与服务器网关从终端读取发来的实时数据进行逻辑判断;
步骤四、经过步骤三的判断确定这条数据是否为报警数据,如果是报警数据,将进一步判断redis中是否已经存在设备的报警历史,如果存在则更新redis中的相应记录,如果不存在则向redis中插入一条报警记录;如果不是报警数据,同样要判断redis中的报警历史,如果存在,表示报警已经解除,则从redis中删除这条记录。
2.根据权利要求1所述的一种基于storm面向用户个性化预警机制大数据计算方法,其特征在于,所述缓存数据库更新模块采用缓存技术redis与界面进行实时交互。
3.根据权利要求1所述的一种基于storm面向用户个性化预警机制大数据计算方法,其特征在于,所述历史报警存储模块采用hadoop的hdfs技术进行分布式存储。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏徐工信息技术股份有限公司,未经江苏徐工信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710108940.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种除油剂生产用反应釜
- 下一篇:新型高粘度终缩聚釜





