[发明专利]基于大数据平台的日志分析系统在审
申请号: | 201711365859.2 | 申请日: | 2017-12-18 |
公开(公告)号: | CN108123834A | 公开(公告)日: | 2018-06-05 |
发明(设计)人: | 莫燮彬 | 申请(专利权)人: | 佛山市米良仓科技有限公司 |
主分类号: | H04L12/24 | 分类号: | H04L12/24;H04L12/26 |
代理公司: | 佛山帮专知识产权代理事务所(普通合伙) 44387 | 代理人: | 颜春艳 |
地址: | 528200 广东省佛山市南海区桂*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提出了一种基于大数据平台的日志分析系统,包括网络数据采集器、分布式实时数据传输通道、分布式日志处理平台、网络数据协议特征库和大数据平台;主要功能和处理流程如下:(1)数据经由分布式实时数据传输通道传送;网络数据采集器负责采集网络设备上的网络数据包,经过分布式实时数据传输通道将数据包实时队列化发送给分布式日志处理平台;(2)分布式日志处理平台对数据包进行实时处理;分布式日志处理平台对网络数据包进行实时数据解析,并通过网络数据协议特征库进行数据特征匹配,将匹配确认为异常的网络日志数据发送给大数据平台进行存储;(3)大数据平台对网络日志数据进行聚类分析、分类训练并动态更新网络数据协议特征库。 | ||
搜索关键词: | 大数据 日志处理 实时数据传输通道 网络数据协议 特征库 网络数据采集器 日志分析系统 网络日志数据 网络数据包 数据包 匹配 实时数据解析 处理流程 动态更新 聚类分析 实时处理 实时队列 数据特征 网络设备 传送 存储 采集 分类 | ||
【主权项】:
一种基于大数据平台的日志分析系统,其特征在于,包括网络数据采集器、分布式实时数据传输通道、分布式日志处理平台、网络数据协议特征库和大数据平台;系统主要功能和处理流程如下:(1)数据经由所述分布式实时数据传输通道传送;网络数据采集器负责采集网络设备上的网络数据包,经过分布式实时数据传输通道,将数据包实时队列化发送给分布式日志处理平台;(2)所述分布式日志处理平台对获得的数据包进行实时处理;分布式日志处理平台对接收到的网络数据包进行实时数据解析,并通过网络数据协议特征库进行数据特征匹配,将匹配确认为异常的网络日志数据发送给大数据平台进行存储;(3)所述大数据平台对存储的网络日志数据进行聚类分析、分类训练并动态更新所述网络数据协议特征库。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于佛山市米良仓科技有限公司,未经佛山市米良仓科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201711365859.2/,转载请声明来源钻瓜专利网。