[发明专利]基于Optane DIMM的大规模图嵌入训练方法及系统在审
| 申请号: | 202111415792.5 | 申请日: | 2021-11-25 |
| 公开(公告)号: | CN114118443A | 公开(公告)日: | 2022-03-01 |
| 发明(设计)人: | 姚建国;陈悦 | 申请(专利权)人: | 上海交通大学 |
| 主分类号: | G06N20/00 | 分类号: | G06N20/00;G06F16/901;G06F9/50 |
| 代理公司: | 上海汉声知识产权代理有限公司 31236 | 代理人: | 胡晶 |
| 地址: | 200240 *** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明提供了一种基于Optane DIMM的大规模图嵌入训练方法及系统,包括:原始图处理步骤:对原始图进行处理,生成DRAM能够加载的图数据;数据预处理步骤:将图数据根据特征进行两层图分割,将完整图拆分成子图,并存储在磁盘中,使得子图能够加载入GPU进行分区训练;图训练步骤:根据不同介质的访存特性,将训练所用的图数据存储在不同的物理介质中,根据训练过程中所依赖数据的不同特性来切割算法,采用CPU和GPU分工训练,平衡CPU计算、GPU计算以及CPU‑GPU通信三者的开销。本发明根据图的特性进行高质量的两层图分割,将大图转化为子图,存储在磁盘中,从而子图能够加载入GPU进行分区训练。 | ||
| 搜索关键词: | 基于 optane dimm 大规模 嵌入 训练 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海交通大学,未经上海交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111415792.5/,转载请声明来源钻瓜专利网。





