[发明专利]平台资源成本分摊方法、装置、存储介质及计算机设备在审
申请号: | 202010140317.0 | 申请日: | 2020-03-03 |
公开(公告)号: | CN111400033A | 公开(公告)日: | 2020-07-10 |
发明(设计)人: | 杨泽森 | 申请(专利权)人: | 京东数字科技控股有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06Q30/06;G06Q40/00 |
代理公司: | 北京华夏泰和知识产权代理有限公司 11662 | 代理人: | 张丽颖;李雪 |
地址: | 100176 北京市大兴区北京经*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 平台 资源 成本 分摊 方法 装置 存储 介质 计算机 设备 | ||
1.一种平台资源成本分摊方法,其特征在于,所述方法包括:
通过数据采集获取平台租户使用每个集群中的服务器资源的多种源数据;
对每个集群对应的每种所述源数据进行解析或数据抽取,得到每个集群对应的多种用户任务资源使用信息列表;
通过每个集群对应的所述多种用户任务资源使用信息列表获取每个平台租户在每个集群中的计算资源使用量和存储资源使用量;
根据每个平台租户在每个集群中的计算资源使用量、存储资源使用量获取每个平台租户在每个集群中对应的分摊系数;
获取每个集群中服务器的数量;
根据每个平台租户在每个集群中对应的分摊系数和每个集群中服务器的数量获取每个平台租户分摊服务器数量;
根据所有平台租户分摊服务器数量获取每个平台租户的资源分摊比;
获取企业总服务器成本;
根据企业总服务器成本和每个平台租户的资源分摊比获取每个平台租户的平台资源分摊成本。
2.根据权利要求1所述的方法,其特征在于,所述通过数据采集获取平台租户使用每个集群中的服务器资源的多种源数据,包括:
通过离线数据采集获取平台租户使用每个集群中的服务器资源的后台管理数据、元数据库数据、调度任务数据、自助提数数据、数据查询数据、镜像存储数据;
通过实时数据采集获取平台租户使用每个集群中的服务器资源的Yarn日志、审计日志。
3.根据权利要求2所述的方法,其特征在于,所述对每个集群对应的每种所述源数据进行解析或数据抽取,得到每个集群对应的多种用户任务资源使用信息列表,包括:
分别对每个集群对应的后台管理数据、元数据库数据、调度任务数据、自助提数数据、数据查询数据进行数据抽取,将抽取到的数据进行存储得到每种源数据对应的用户任务资源使用信息列表;
分别对每个集群对应的镜像存储数据、Yarn日志、审计日志进行解析,将解析到的数据进行存储得到每种源数据对应的用户任务资源使用信息列表。
4.根据权利要求3所述的方法,其特征在于,所述通过每个集群对应的所述多种用户任务资源使用信息列表获取每个平台租户在每个集群中的计算资源使用量,包括:
从每个集群对应的所述多种用户任务资源使用信息列表中获取每个平台租户在每个集群中作业的job数量及每个job对应的map数量、单个map的内存申请量、map的平均执行时长、reduce数量、单个reduce的内存申请量、reduce的平均执行时长;
分别对每个job的map数量、对应的单个map的内存申请量、对应的map的平均执行时长进行求积得到每个job的第一计算资源使用量;
分别对每个job的reduce数量、对应的reduce的内存申请量、对应的reduce的平均执行时长进行求积得到每个job的第二计算资源使用量;
对每个平台租户在每个集群中作业的所有job对应的第一计算资源使用量与第二计算资源使用量求和得到每个平台租户在每个集群中的计算资源使用量。
5.根据权利要求4所述的方法,其特征在于,所述根据每个平台租户在每个集群中的计算资源使用量、存储资源使用量获取每个平台租户在每个集群中对应的分摊系数,包括:
获取每个集群的计算资源权重系数和存储资源权重系数;
根据每个平台租户在每个集群中的计算资源使用量得到每个平台租户在每个集群中的计算资源占比;
根据每个平台租户在每个集群中的存储资源使用量得到每个平台租户在每个集群中的存储资源占比;
对每个平台租户在相同集群中计算资源占比与计算资源权重系数的乘积、存储资源占比与存储资源权重系数的乘积进行求和得到每个平台租户在每个集群中对应的分摊系数。
6.根据权利要求5所述的方法,其特征在于,所述根据每个平台租户在每个集群中对应的分摊系数和每个集群中服务器的数量获取每个平台租户分摊服务器数量,包括:
对每个平台租户在每个集群中对应的分摊系数与对应集群中服务器的数量的乘积进行求和得到每个平台租户分摊服务器数量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东数字科技控股有限公司,未经京东数字科技控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010140317.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种具有个人防护功能的空间结构
- 下一篇:一种智能代客泊车服务系统