[发明专利]一种神经网络的4比特量化方法及系统在审
申请号: | 202010589233.5 | 申请日: | 2020-06-24 |
公开(公告)号: | CN111882058A | 公开(公告)日: | 2020-11-03 |
发明(设计)人: | 王曦辉 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
主分类号: | G06N3/08 | 分类号: | G06N3/08;G06N3/04 |
代理公司: | 济南诚智商标专利事务所有限公司 37105 | 代理人: | 王申雨 |
地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种神经网络的4比特量化方法及系统,该方法包括:加载神经网络的预训练模型;在预训练模型中,统计各饱和激活层satRelu的初始值;在神经网络中添加伪量化节点,并利用satRelu的初始值进行神经网络的重训练,获取伪量化模型;判断伪量化模型的精度是否收敛到设定的精度;如果是,对伪量化模型进行推理前处理,转换为可用于推理运算的4比特的推理模型;否则返回进行神经网络的重训练。该系统主要包括:加载模块、统计模块、重训练模块、判断模块和转换模块。通过本申请,能够在确保训练结果准确性的基础上,有效提高训练效率。 | ||
搜索关键词: | 一种 神经网络 比特 量化 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010589233.5/,转载请声明来源钻瓜专利网。
- 上一篇:一种轮胎分解机
- 下一篇:一种基因序列优化方法、装置、设备及介质