|
钻瓜专利网为您找到相关结果 6083624个,建议您 升级VIP下载更多相关专利
- [发明专利]一种神经网络蒸馏方法及装置-CN202010615537.4在审
-
许奕星;陈醒濠;王云鹤;许春景
-
华为技术有限公司
-
2020-06-30
-
2020-11-03
-
G06N3/04
- 本申请公开了一种神经网络蒸馏方法,应用于人工智能领域,包括:通过第一神经网络和第二神经网络对待处理数据进行处理,以获取第一目标输出和第二目标输出,第一目标输出为对第一神经网络层的输出进行基于核函数的变换得到的,第二目标输出为对第二神经网络层的输出进行基于核函数的变换得到的;根据第一目标输出和第二目标输出构建的目标损失对第一神经网络进行知识蒸馏。本申请对第一神经网络层的输出和第二神经网络层的输出进行了基于核函数的变换,进而可以将第一神经网络层和第二神经网络层输入和权重映射到高维特征空间,消除了知识蒸馏时由于神经网络层的权重分布不同而造成的网络性能降低
- 一种神经网络蒸馏方法装置
- [发明专利]通信装置及方法-CN202210357164.4在审
-
郭子阳;刘鹏;杨讯;罗嘉俊
-
华为技术有限公司
-
2022-04-06
-
2023-10-24
-
H04W28/18
- 该装置包括:输入接口、神经网络处理器和输出接口,该神经网络处理器存储有神经网络,该神经网络包括输入层和输出层;输入接口,用于获取输入指示信息、功能指示信息、输出指示信息或参数指示信息中的至少一项;神经网络处理器,用于根据输入层和输出层执行功能指示信息所指示的功能;输出接口,用于输出神经网络处理器执行功能后的结果。神经网络的输入层结构和输出层结构可以基于输入接口获取到的信息确定。通过该装置,能够基于神经网络实现MAC层所实现的功能,简化神经网络的复杂度,便于硬件加速。
- 通信装置方法
|