[发明专利]一种数据管理监控装置在审
申请号: | 201811283386.6 | 申请日: | 2018-10-31 |
公开(公告)号: | CN109408579A | 公开(公告)日: | 2019-03-01 |
发明(设计)人: | 鲁大军 | 申请(专利权)人: | 武汉光谷联众大数据技术有限责任公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/2455;G06F16/2453;G06F16/28;G06F9/50;G06F9/52 |
代理公司: | 北京天盾知识产权代理有限公司 11421 | 代理人: | 杨本官 |
地址: | 430000 湖北省武汉市东湖新技术开发区武大园路7*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明数据网络数据管理技术领域,尤其涉及一种数据管理监控装置。本发明的数据管理监控装置,有效提高了数据管理以及监控的效率,通过状态信息的处置与缓存标志的处理方式降低了数据管理和监控的执行难度,便于实施;本发明的数据管理监控装置特别适用于高速网络环境中的数据抽取和监控,由于本发明的数据管理监控装置数据抽取过程基于优先级控制方式,且仅进行简单的过滤涮选,保证了数据抽取时不会占用过多的系统资源,降低其数据抽取的耗时,同时为后序数据解析与存储作业的提供更多系统资源。 | ||
搜索关键词: | 数据管理监控 数据抽取 数据管理 监控 缓存 高速网络环境 数据管理技术 多系统资源 优先级控制 处理方式 存储作业 数据解析 数据网络 系统资源 装置数据 过滤 抽取 耗时 占用 保证 | ||
【主权项】:
1.一种数据管理监控装置,其特征在于,包括,数据处理模块、数据监控模块;数据抽取组件用于抽取网络适配器接收到的数据内容,并对抽取得到的数据进行缓存,之后数据抽取组件将缓存储据传递给数据解析模块;数据解析模块用于对缓存储据进行解析,并将解析后结果发送至数据存储模块等待处理,数据存储模块根据不同解析结果将数据进行分类存储和/或备份;数据抽取组件根据优先级程度对并发的主权去抽取任务进行依序抽取,高优先级的抽取流程优先执行后,同时该抽取流程在更高优先级的服务到达或者收到放弃指令之前持续占用CPU资源;数据抽取组件对数据包进行过滤和筛选以定位和精简数据容量,并将到来的数据包进行缓存,同时在缓存数据中加入数据包的抽取状态及其数据信息;数据抽取组件优先将数据缓存至内存,并在内存负载达到某阈值后存入硬盘;数据缓存组件从数据库中抽取数据并判断缓存中是否存在数据,当缓存中没有数据时则根据缓存数据中抽取组件的工作状态判断后序是停止还是继续解析作业,即当缓存中无数据且数据抽取组件停止作业则停止解析作业,否则继续等待缓存数据并启动解析作业,解析作业过程中,解析组件根据数据的不同协议类型进行分别处理,并将相应的数据发送至存储系统;数据监控模块包括数据监控组件及查询组件;监控组件监控网络中主机的流量信息,控制组件管理和控制数据抽取组件的工作状态,查询组件提供查询控制接口,包括对数据抽取组件的控制、数据的查询;监控组件记录被监控设备数据的上下行、实时收发以及区间内平均收发量,定时对流量数据进行保存和清零。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉光谷联众大数据技术有限责任公司,未经武汉光谷联众大数据技术有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811283386.6/,转载请声明来源钻瓜专利网。