[发明专利]大数据平台的健康度管控方法、装置、介质及电子设备有效
申请号: | 201710253040.0 | 申请日: | 2017-04-18 |
公开(公告)号: | CN108733532B | 公开(公告)日: | 2022-03-04 |
发明(设计)人: | 杨泽森;王晓 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30 |
代理公司: | 北京律智知识产权代理有限公司 11438 | 代理人: | 阚梓瑄;王卫忠 |
地址: | 100195 北京市海淀区杏石口路6*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 平台 健康 度管控 方法 装置 介质 电子设备 | ||
本发明提供了一种大数据平台的健康度管控方法、装置、介质及计算设备,其中,所述健康度管控方法包括:获取大数据平台的健康度指标体系,所述健康度指标体系包含用于衡量所述大数据平台的健康度的至少一类指标;根据所述至少一类指标中每类指标的各个指标值,计算所述每类指标的健康度;根据所述每类指标的健康度,计算所述大数据平台的总体健康度。通过本发明的技术方案,可以掌握每类指标的健康度,以及大数据平台的总体健康度,从而为大数据平台的运行和管控提供直观的数据化决策支持。
技术领域
本发明涉及数据管理技术领域,具体而言,涉及一种大数据平台的健康度管控方法、装置、可读介质及电子设备。
背景技术
目前很多中大型企业基于Hadoop(一种分布式系统基础架构,用户可以在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的威力进行高速运算和存储)技术生态系统建设了大数据平台与云平台,以便于掌握此类平台的底层软硬件、平台资源队列、平台计算与存储等方面是否合理高效运行。
现有的Hadoop技术生态系统中普遍采用各类Hadoop服务器运维管理系统等静态数据形式,采用人工方式记录每台Hadoop服务器或客户端机器的运行情况,其预警和管控也均是针对单个服务器或客户端级别来实现,例如采用人工在集群后台各服务器或客户端修改相关配置文件形式。并且只能通过查看集群队列内存资源使用、存储资源使用等单一指标形式查看集群运行情况,采用针对个别特定指标的阈值预警,集群整体健康情况不够准确。
由于没有集群健康度指标体系规划,因此没有相配套的健康度综合管控机制。因此,需要一种新的大数据平台与集群健康度的管控方法及装置。
需要说明的是,在上述背景技术部分公开的信息仅用于加强对本发明的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本发明的目的在于提供一种大数据平台的健康度管控方法、装置、可读介质及计算设备,进而至少在一定程度上克服由于相关技术的限制和缺陷而导致的一个或者多个问题。
本发明的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本发明的实践而习得。
根据本发明的第一方面,提供了一种大数据平台的健康度管控方法,包括:获取大数据平台的健康度指标体系,所述健康度指标体系包含用于衡量所述大数据平台的健康度的至少一类指标;根据所述至少一类指标中每类指标的各个指标值,计算所述每类指标的健康度;根据所述每类指标的健康度,计算所述大数据平台的总体健康度。
在本发明的一些实施例中,基于前述方案,计算所述每类指标的健康度的步骤,包括:确定所述每类指标的各个指标值的权重;根据所述各个指标值的权重,对所述各个指标值进行加权求和计算,得到所述每类指标的健康度。
在本发明的一些实施例中,基于前述方案,计算所述大数据平台的总体健康度的步骤,包括:确定所述每类指标的权重;根据所述指标的权重,对所述至少一类指标进行加权求和计算,得到所述大数据平台的总体健康度。
在本发明的一些实施例中,基于前述方案,还包括:基于可视化界面展示所述每类指标的各个指标值。
在本发明的一些实施例中,基于前述方案,基于可视化界面展示所述每类指标的各个指标值的步骤,包括:配置报表模板;基于所述报表模板展示所述每类指标的各个指标值。
在本发明的一些实施例中,基于前述方案,还包括:基于所述总体健康度和预设的健康度阈值,对所述大数据平台进行预警。
在本发明的一些实施例中,基于前述方案,还包括:每经过预定时长,均再次计算所述大数据平台的总体健康度。
在本发明的一些实施例中,基于前述方案,还包括:保存每次计算得到的所述大数据平台的总体健康度;基于保存的每次计算得到的所述大数据平台的总体健康度,对所述大数据平台的总体健康度进行统计分析。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710253040.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:基于云计算的GPU性能监控系统
- 下一篇:经计划的主机维护的可选的手动调度
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置