[发明专利]一种基于多层级中介码的图神经网络编译优化方法在审
| 申请号: | 202310227947.5 | 申请日: | 2023-03-10 |
| 公开(公告)号: | CN116225452A | 公开(公告)日: | 2023-06-06 |
| 发明(设计)人: | 卢冶;仪德智;杨航 | 申请(专利权)人: | 南开大学 |
| 主分类号: | G06F8/41 | 分类号: | G06F8/41;G06F8/60;G06N3/045 |
| 代理公司: | 天津睿勤专利代理事务所(普通合伙) 12225 | 代理人: | 张伟凤 |
| 地址: | 300000*** | 国省代码: | 天津;12 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 基于 多层 中介 神经网络 编译 优化 方法 | ||
1.一种基于多层级中介码的图神经网络编译优化方法,其特征在于,包括以下步骤:
步骤1:对图神经网络模型进行预处理,然后训练模型;
步骤2:将训练后的图神经网络模型转换为ONNX格式;
步骤3:使用ONNX-MLIR前端把ONNX格式的图神经网络模型转换为IR;
步骤4:进行IR编译优化;
步骤5:生成可执行程序。
2.如权利要求1所述的基于多层级中介码的图神经网络编译优化方法,其特征在于,步骤1中,预处理包括将稀疏张量数据类型改写为稠密张量类型,使用torch.nn基类重构模型。
3.如权利要求1所述的基于多层级中介码的图神经网络编译优化方法,其特征在于,步骤4中,IR编译优化包括图层IR优化和算子层IR优化,
图层IR优化包括算子分解、形状推断、图重写和常量传播;
算子层IR优化包括循环展开、循环调度、循环分块和内存分配。
4.如权利要求1所述的基于多层级中介码的图神经网络编译优化方法,其特征在于,步骤5中,先把优化好的IR转换为C++代码,再生成可执行程序。
5.如权利要求4所述的基于多层级中介码的图神经网络编译优化方法,其特征在于,IR转换为C++代码的过程为:
S1:对照MLIR官方提供的方言手册,明确各个操作的具体定义;
S2:遍历整个IR,使用正则表达式识别出各个操作,以及各个操作中包含的变量类型、变量名字和变量限制;
S3:根据各个操作的定义,使用模板替换出各个操作的C++代码。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南开大学,未经南开大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310227947.5/1.html,转载请声明来源钻瓜专利网。





