[发明专利]一种数据处理方法及装置在审
申请号: | 201710554490.3 | 申请日: | 2017-07-07 |
公开(公告)号: | CN107341057A | 公开(公告)日: | 2017-11-10 |
发明(设计)人: | 宋书涛;吴韶华 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 北京安信方达知识产权代理有限公司11262 | 代理人: | 李红爽,李丹 |
地址: | 450018 河南省郑州市*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 | ||
1.一种数据处理方法,其特征在于,包括以下步骤:
控制设备获取数据处理请求后,根据各个计算节点负载特征信息,将所述数据处理请求分配至对应的计算节点;
所述计算节点对所述数据处理请求进行处理。
2.根据权利要求1所述的方法,其特征在于,负载特征信息包括:预设时段内存平均利用率、预设时段CPU平均利用率。
3.根据权利要求2所述的方法,其特征在于,控制设备获取数据处理请求后,选择所述预设时段内存平均利用率小于第一预设值的计算节点,将所述数据处理请求分配至选择的计算节点;
所述选择的计算节点对所述数据处理请求进行处理。
4.根据权利要求2所述的方法,其特征在于,控制设备获取数据处理请求后,选择所述预设时段CPU平均利用率小于第二预设值的计算节点,将所述数据处理请求分配至选择的计算节点;
所述选择的计算节点对所述数据处理请求进行处理。
5.根据权利要求1所述的方法,其特征在于,所述计算节点对所述数据处理请求进行处理后,将处理结果传输至所述控制设备或存储设备。
6.根据权利要求5所述的方法,其特征在于,所述计算节点内部的多个图形处理单元GPU之间通过信息传递应用程序接口函数进行通信。
7.根据权利要求6所述的方法,其特征在于,所述信息传递应用程序接口函数为MPI_Allreduce函数。
8.一种数据处理装置,其特征在于,包括:控制设备、多个计算节点;其中,所述控制设备与所述多个计算节点连接;
控制设备,用于获取数据处理请求后,根据各个计算节点负载特征信息,将所述数据处理请求分配至对应的计算节点;
所述计算节点,用于对所述数据处理请求进行处理。
9.根据权利要求8所述的装置,其特征在于,控制设备,还用于获取数据处理请求后,选择所述预设时段内存平均利用率小于第一预设值的计算节点,将所述数据处理请求分配至选择的计算节点;
所述选择的计算节点,用于对所述数据处理请求进行处理。
10.根据权利要求8所述的装置,其特征在于,控制设备,用于获取数据处理请求后,选择所述预设时段CPU平均利用率小于第二预设值的计算节点,将所述数据处理请求分配至选择的计算节点;
所述选择的计算节点,用于对所述数据处理请求进行处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710554490.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于网络文件系统的线程分配的方法及装置
- 下一篇:一种资源回收方法及装置