[发明专利]一种基于KNL集群的大规模数据的处理方法及系统在审
| 申请号： | 201710107888.2 | 申请日： | 2017-02-27 |
| 公开（公告）号： | CN106856509A | 公开（公告）日： | 2017-06-16 |
| 发明（设计）人： | 宋书涛 | 申请（专利权）人： | 郑州云海信息技术有限公司 |
| 主分类号： | H04L29/08 | 分类号： | H04L29/08 |
| 代理公司： | 北京集佳知识产权代理有限公司11227 | 代理人： | 罗满 |
| 地址： | 450018 河南省郑州市*** | 国省代码： | 河南;41 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于KNL集群的大规模数据的处理方法及系统，该方法包括CPU控制节点根据收集的各个KNL计算节点的状态信息，生成各个KNL计算节点的计算能力信息；将总的计算数据分成大小相同的基本数据块，并为每个KNL计算节点分配对应数量的基本数据块；KNL计算节点读取对应的基本数据块并对基本数据块进行计算；本发明通过CPU控制节点为每个KNL计算节点分配对应数量的基本数据块，使得KNL计算节点可以计算对应数量的基本数据块，从而达到KNL集群中的KNL计算节点对大规模数据计算的负载均衡，更好的利用每个KNL计算节点的计算性能，提高了KNL集群的整体运行效率，提升了计算速度，提高了用户体验度。 | ||
| 搜索关键词： | 一种 基于 knl 集群 大规模 数据 处理 方法 系统 | ||
【主权项】：
一种基于KNL集群的大规模数据的处理方法，其特征在于，包括：CPU控制节点根据收集的各个KNL计算节点的状态信息，生成各个所述KNL计算节点的计算能力信息；其中，所述状态信息包括每个所述KNL计算节点的空闲核心的数量、网络的通信能力和访存带宽；所述CPU控制节点根据所述计算能力信息将总的计算数据分成大小相同的基本数据块，并为每个所述KNL计算节点分配对应数量的所述基本数据块；所述CPU控制节点将为每个所述KNL计算节点分配的所述基本数据块对应的位置信息发送给对应的所述KNL计算节点；所述KNL计算节点根据获取的所述位置信息读取对应的所述基本数据块并对所述基本数据块进行计算。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司，未经郑州云海信息技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201710107888.2/，转载请声明来源钻瓜专利网。
