[发明专利]基于阻变式存储器的模型在线迁移训练方法、装置及芯片在审
申请号: | 202111591016.0 | 申请日: | 2021-12-23 |
公开(公告)号: | CN114330688A | 公开(公告)日: | 2022-04-12 |
发明(设计)人: | 施正;张涌;曹国忠;萧得富;张硕 | 申请(专利权)人: | 厦门半导体工业技术研发有限公司 |
主分类号: | G06N3/063 | 分类号: | G06N3/063;G06N3/04;G06N3/08 |
代理公司: | 北京乐知新创知识产权代理事务所(普通合伙) 11734 | 代理人: | 秦然 |
地址: | 361008 福建省厦门市软件*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 阻变式 存储器 模型 在线 迁移 训练 方法 装置 芯片 | ||
1.一种基于阻变式存储器的模型在线迁移训练方法,其特征在于,所述方法包括:
获取需要映射至阻变式存储器上的神经网络模型的各层对应的神经网络权重,所述神经网络权重基于对所述神经网络模型的离线训练过程得到;
获取所述阻变式存储器所支持的多个电导的电导偏移函数;
根据所述电导偏移函数,通过迭代训练对所述神经网络模型进行在线迁移训练,以对所述神经网络权重进行更新;
根据更新后的神经网络权重,对所述阻变式存储器的忆阻器阵列电导值进行更新,得到训练后的阻变式存储器。
2.根据权利要求1所述的方法,其特征在于,所述获取所述阻变式存储器所支持的多个电导的电导偏移函数,包括:
针对所述阻变式存储器所支持的多个电导中的每一电导,每间隔设定时间采集一次所述电导的电导值,以确定每一电导随时间的变化曲线;
根据所述变化曲线,确定所述电导的电导值概率密度函数,作为针对所述电导的电导偏移函数。
3.根据权利要求2所述的方法,其特征在于,针对所述阻变式存储器所支持的多个电导中的每一电导,每间隔设定时间采集一次所述电导的电导值,以确定每一电导随时间的变化曲线,包括:
将所述阻变式存储器的电导配置为所述阻变式存储器所支持的最小理想电导,每间隔设定时间采集一次采集所述最小理想电导的实际电导值,并记录所述实际电导值和时间;
在对所述最小理想电导的实际电导值采集次数达到设定采集次数的情况下,根据所述实际电导值和时间,确定所述最小电导随时间的变化曲线;
将所述阻变式存储器的电导配置为第二理想电导,所述第二理想电导的值等于在所述最小理想电导的基础上增加一倍的理想电导步长,重复执行上述操作,确定所述第二理想电导随时间的变化曲线;
由此,循环执行上述操作,直至将所述阻变式存储器的电导配置为最大理想电导,所述最大理想电导的值等于在所述最小理想电导的基础上增加N-1倍的理想电导步长,重复执行上述操作,确定所述第最大理想电导随时间的变化曲线;
其中,N表示所述阻变式存储器所支持的电导个数;
所述理想电导步长等于所述最大理想电导和所述最小理想电导的差值与所述阻变式存储器所支持的电导个数的比值。
4.根据权利要求1所述的方法,其特征在于,根据所述电导偏移函数,通过迭代训练对所述神经网络模型进行在线迁移训练,以对所述神经网络权重进行更新,包括:
基于针对多个电导的电导偏移函数,确定需要对所述神经网络模型的神经网络层的输出向量进行调整的电流调整值;
按照从神经网络层的输入层至输出层的顺序,根据多个神经网络层的电流调整值,依次更新所述神经网络模型的多个神经网络层的神经网络权重。
5.根据权利要求1所述的方法,其特征在于,根据更新后的神经网络权重,对所述阻变式存储器的忆阻器阵列电导值进行更新,得到训练后的阻变式存储器,包括:
根据更新后的所述神经网络模型的多个神经网络层的神经网络权重,判断所述神经网络模型的输出是否满足设定结束条件;
在所述神经网络模型的输出满足设定结束条件的情况下,结束对所述神经网络模型进行在线迁移训练,并根据更新后的所述神经网络模型的多个神经网络层的神经网络权重,对所述阻变式存储器的忆阻器阵列电导值进行更新。
6.根据权利要求5所述的方法,其特征在于,根据更新后的所述神经网络模型的多个神经网络层的神经网络权重,判断所述神经网络模型的输出是否满足设定结束条件,包括:
根据更新后的所述神经网络模型的多个神经网络层的神经网络权重,判断当前轮次在线迁移训练得到的所述神经网络模型的输出精度;
在最后设定轮次在线迁移训练得到的所述神经网络模型的输出精度的方差小于设定方差阈值的情况下,判定所述神经网络模型的输出满足设定结束条件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于厦门半导体工业技术研发有限公司,未经厦门半导体工业技术研发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111591016.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种汽车子母扣自动化装配机
- 下一篇:一种电芯的化成陈化方法以及锂离子电池