[发明专利]分布式执行深度学习任务的优化方法和分布式系统有效
| 申请号： | 202211530586.3 | 申请日： | 2022-12-01 |
| 公开（公告）号： | CN115543639B | 公开（公告）日： | 2023-04-28 |
| 发明（设计）人： | 刁岚松;王思宇;曹宗雁;刘小勇;林伟 | 申请（专利权）人： | 阿里云计算有限公司 |
| 主分类号： | G06F9/50 | 分类号： | G06F9/50;G06N3/0464;G06N3/08 |
| 代理公司： | 北京展翼知识产权代理事务所(特殊普通合伙) 11452 | 代理人： | 张阳 |
| 地址： | 310024 浙江省*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 公开了一种分布式执行深度学习任务的优化方法和分布式系统。所述方法包括：基于深度学习任务生成计算图并分配硬件资源；对硬件资源进行分组以获取至少一个分组方案；针对每个分组方案，基于该分组方案下的因子取值对计算图包含的多个算子各自涉及的张量信息进行切分，获取多个候选切分方案；使用开销模型选出效率最优的分布式执行切分方案，用于硬件资源的深度学习任务执行。由此，通过基于设备分组的算子切分，并结合基于开销模型的优化求解，实现针对各类深度学习任务的分布式执行自动优化。进一步地，可以引入基于分组的计算图分割，还可以根据不同的优化水平对求解空间进行限制，由此能够在可控的时间内生成所需优化级别的分布式执行方案。 | ||
| 搜索关键词： | 分布式 执行 深度 学习 任务 优化 方法 系统 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于阿里云计算有限公司，未经阿里云计算有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202211530586.3/，转载请声明来源钻瓜专利网。
