[发明专利]一种可形变激活函数的改进方法、系统及存储设备在审
申请号: | 201810156485.1 | 申请日: | 2018-02-24 |
公开(公告)号: | CN108388941A | 公开(公告)日: | 2018-08-10 |
发明(设计)人: | 李宏亮;程起上 | 申请(专利权)人: | 成都快眼科技有限公司 |
主分类号: | G06N3/04 | 分类号: | G06N3/04 |
代理公司: | 成都九鼎天元知识产权代理有限公司 51214 | 代理人: | 郭彩红 |
地址: | 610200 四川省成都市双*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种可形变激活函数的改进方法、系统及存储设备。基于参数学习,引入可形变的指数函数来优化现有激活函数中的指数形式,同时,引入尺度参数,在训练过程中,利用梯度更新尺度参数。通过将“参数化”的思想引入激活函数,从而提高激活函数的性能,进而提升网络的训练效率和性能;适用于任何神经网络的构建,在不用平台上具有很好的拓展性。 | ||
搜索关键词: | 激活函数 形变 尺度参数 存储设备 引入 参数学习 神经网络 梯度更新 训练过程 训练效率 指数函数 指数形式 参数化 拓展性 构建 改进 优化 网络 | ||
【主权项】:
1.一种可形变激活函数的改进方法,方法包括:基于参数学习,引入可形变的指数函数来优化现有激活函数中的指数形式,同时,引入尺度参数,在训练过程中,利用梯度更新尺度参数。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于成都快眼科技有限公司,未经成都快眼科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810156485.1/,转载请声明来源钻瓜专利网。
- 上一篇:一种滚动轴承滚珠计数装置
- 下一篇:基于大数据的信息智能处理方法