[发明专利]基于注意力机制,知识蒸馏防御后门攻击的方法及系统在审
申请号: | 202110769056.3 | 申请日: | 2021-07-07 |
公开(公告)号: | CN113507466A | 公开(公告)日: | 2021-10-15 |
发明(设计)人: | 陈艳姣;龚雪鸾;董建硕 | 申请(专利权)人: | 浙江大学 |
主分类号: | H04L29/06 | 分类号: | H04L29/06;G06N3/04;G06N3/08 |
代理公司: | 北京睿智保诚专利代理事务所(普通合伙) 11732 | 代理人: | 韩迎之 |
地址: | 310058 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了基于注意力机制,知识蒸馏防御后门攻击的方法及系统,应用于互联网安全技术领域,包括:神经网络微调步骤:将目标神经网络进行微调,得到一个微调后的深度神经网络;注意力图生成步骤:将深度神经网络每一个激活层的输出通过注意力映射算子,映射到注意力图上;模型自蒸馏步骤:利用注意力图逐层进行深度神经网络的知识自蒸馏处理,得到得到各层之间的蒸馏损失;防御模块生成步骤:通过模型交叉损失函数,训练得到防御模型。本发明可以有效防御后门攻击,并且防御效果远远超过了传统方法;在消除网络对触发模式的注意力方面也更有效。 | ||
搜索关键词: | 基于 注意力 机制 知识 蒸馏 防御 后门 攻击 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大学,未经浙江大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110769056.3/,转载请声明来源钻瓜专利网。