[发明专利]一种大规模图结构数据处理方法、装置和系统有效
| 申请号： | 201310557066.6 | 申请日： | 2013-11-08 |
| 公开（公告）号： | CN103631878B | 公开（公告）日： | 2017-09-08 |
| 发明（设计）人： | 刘明君;赵中英;冯铮;何一峰;冯圣中 | 申请（专利权）人： | 中国科学院深圳先进技术研究院 |
| 主分类号： | G06F17/30 | 分类号： | G06F17/30;G06F12/02 |
| 代理公司： | 深圳中一专利商标事务所44237 | 代理人： | 张全文 |
| 地址： | 518055 广东省深圳*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种大规模图结构数据处理方法、装置和系统，以提高数据计算效率并增强系统运行的可靠性。所述方法包括从节点将图结构数据读取至内存；对内存中的图结构数据进行预处理，得到图结构数据中相邻顶点处于同一数据片的至少一个数据片；将预处理所得至少一个数据片映射至从节点；从节点采用迭代算法对映射至从节点的数据片进行计算。由于相邻顶点的信息映射至同一从节点而不是不同从节点，如此，从节点采用迭代算法对映射至从节点的数据片进行计算时，无需与其他从节点进行通信，由此减少了通信量，降低对集群内带宽资源的需求，并且提高了集群系统及其节点的计算效率。 | ||
| 搜索关键词： | 一种 大规模 结构 数据处理 方法 装置 系统 | ||
【主权项】：
一种大规模图结构数据处理方法，其特征在于，所述方法包括：从节点将图结构数据读取至内存，所述从节点将图结构数据读取至内存包括：首先打开指定文件，设定内存地址，将文件内容按行或用户自定义的方式读取到预设的位置，其中，从文件读取到的内容需要解析成可计算的格式；对所述内存中的图结构数据进行预处理，得到所述图结构数据中相邻顶点处于同一数据片的至少一个数据片，针对大规模图结构数据，对所述内存中的图结构数据进行预处理时，多个从节点同时执行图结构数据的预处理；将所述预处理所得至少一个数据片映射至从节点；从节点采用迭代算法对所述映射至从节点的数据片进行计算。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于中国科学院深圳先进技术研究院，未经中国科学院深圳先进技术研究院许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201310557066.6/，转载请声明来源钻瓜专利网。
- 上一篇：插座
- 下一篇：用于提供协同复苏灌注支持的系统和方法
