专利名称
主分类
A 农业
B 作业;运输
C 化学;冶金
D 纺织;造纸
E 固定建筑物
F 机械工程、照明、加热
G 物理
H 电学
专利下载VIP
公布日期
2023-10-24 公布专利
2023-10-20 公布专利
2023-10-17 公布专利
2023-10-13 公布专利
2023-10-10 公布专利
2023-10-03 公布专利
2023-09-29 公布专利
2023-09-26 公布专利
2023-09-22 公布专利
2023-09-19 公布专利
更多 »
专利权人
国家电网公司
华为技术有限公司
浙江大学
中兴通讯股份有限公司
三星电子株式会社
中国石油化工股份有限公司
清华大学
鸿海精密工业股份有限公司
松下电器产业株式会社
上海交通大学
更多 »
钻瓜专利网为您找到相关结果1430302个,建议您升级VIP下载更多相关专利
  • [发明专利]姿态检测方法、装置、设备及存储介质-CN201811426838.1有效
  • 项伟;王毅峰;黄秋实 - 广州市百果园信息技术有限公司
  • 2018-11-27 - 2023-10-17 - G06N3/0464
  • 该方法包括:确定待压缩神经网络模型各卷积层中卷积核的重要度;根据最小重要度的卷积核对待压缩神经网络模型剪枝,得到神经网络模型;判断神经网络模型是否符合压缩终止条件;若所述神经网络模型符合压缩终止条件,则将所述神经网络模型作为目标深度神经网络;若所述神经网络模型不符合压缩终止条件,则重复将所述神经网络模型作为待压缩神经网络模型剪枝的操作。利用该方法,有效提高了深度神经网络模型在嵌入式平台上的运行效率,同时也精简了深度神经网络模型的存储空间,进而也提高了依赖深度神经网络模型的应用产品的用户体验。
  • 姿态检测方法装置设备存储介质
  • [发明专利]卷积神经网络压缩方法、装置及电子设备-CN202111645899.9在审
  • 李心慧;石柱国;李凡平 - 以萨技术股份有限公司
  • 2021-12-30 - 2022-04-12 - G06N3/063
  • 本发明提供了一种卷积神经网络压缩方法、装置及电子设备,该方法包括:获取目标应用场景的目标训练样本集;采用方差缩放方法初始化待压缩神经网络模型的权重,得到待压缩神经网络模型的初始权重向量;以预设稀疏度作为约束条件,确定初始权重向量对应的权重优化向量,并根据权重优化向量计算待压缩神经网络模型中所有连接的灵敏度;根据预设稀疏度和灵敏度对待压缩神经网络模型进行剪枝,得到稀疏神经网络模型;使用目标训练样本集训练稀疏神经网络模型,直至得到训练完成的目标神经网络模型。本发明可以在保证压缩模型的准确性的同时提高模型压缩的效率。
  • 卷积神经网络压缩方法装置电子设备
  • [发明专利]支持压缩及解压缩的神经网络运算装置及方法-CN201811188905.0有效
  • 不公告发明人 - 上海寒武纪信息科技有限公司
  • 2018-10-12 - 2022-11-29 - G06N3/063
  • 本公开涉及一种支持压缩及解压缩的神经网络运算装置及方法,所述装置包括:参数压缩单元,确定神经网络模型的待压缩参数,并利用编码器对待压缩参数进行压缩处理,获得与神经网络模型对应的语义向量;参数存储单元,存储与神经网络模型对应的语义向量,向参数解压缩单元或运算单元发送所述语义向量;参数解压缩单元,对语义向量进行解压缩处理,获得神经网络模型的解压缩参数,并向运算单元发送解压缩参数;及运算单元,用于进行与神经网络模型相关联的运算。本公开可以对待压缩参数进行压缩,从而有效减少神经网络的模型大小、降低了对内存的需求,从而有效提高了神经网络的数据处理速度。
  • 支持压缩解压缩神经网络运算装置方法
  • [发明专利]基于动态压缩模型参数调整方法、装置、设备、介质-CN202310571824.3在审
  • 李泽远;王健宗 - 平安科技(深圳)有限公司
  • 2023-05-19 - 2023-07-25 - G06N3/098
  • 本申请实施例提供了一种基于动态压缩模型参数调整方法、装置、设备、介质,属于人工智能技术领域。该方法包括:获取每个子模型的训练结果,根据训练结果确定每个子模型的贡献率,根据贡献率阈值和贡献率确定目标子模型;根据中央学习参数将目标子模型压缩参数降低为目标压缩参数;根据目标压缩参数对目标子模型的梯度参数进行量化压缩,得到目标梯度参数;当目标子模型的梯度变化率小于或等于变化率阈值,根据目标梯度参数调整中央模型的目标聚合参数。根据本实施例的技术方案,能够减小贡献率较大的子模型压缩强度,避免有效信息的丢失,通过调整聚合参数降低模型之间的通信压力,提高模型训练时的数据传输效率。
  • 基于动态压缩模型参数调整方法装置设备介质
  • [发明专利]基于不确定性估计知识蒸馏的语言模型压缩方法-CN202210540113.5在审
  • 董伟生;黄天瑜;毋芳芳;石光明 - 西安电子科技大学
  • 2022-05-17 - 2022-07-29 - G06N3/08
  • 本发明公开了一种基于不确定性估计知识蒸馏的语言模型压缩方法,主要解决现有网络压缩技术存在的训练成本高、速度慢和知识蒸馏过程存在噪声干扰的问题。其实现方案是:1)对原始语言模型进行对半压缩得到压缩后的神经网络;2)利用原始语言模型合理初始化压缩后神经网络的参数;3)添加前馈网络结构的参数蒸馏损失函数,设计不确定性估计损失函数及自然语言处理任务的交叉熵损失函数;4)利用所设计的损失函数训练压缩后的神经网络模型。本发明降低了网络压缩训练过程的计算量,提高了网络压缩率,加速了网络推理速度,可广泛应用于模型部署、模型压缩任务,为硬件资源紧缺的应用场景提供新的模型压缩解决方案。
  • 基于不确定性估计知识蒸馏语言模型压缩方法

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

400-8765-105周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top