|
钻瓜专利网为您找到相关结果 54个,建议您 升级VIP下载更多相关专利
- [发明专利]一种神经网络训练的并行方法-CN202310456766.X在审
-
张灵燕;雷莉霞;宋岚;吴锐;刘张亮
-
华东交通大学
-
2023-04-25
-
2023-08-15
-
G06N3/0464
- 本发明公开了一种神经网络训练的并行方法,其包括:六种张量切分模型步骤,用于对神经网络中特征图,卷积核,梯度张量在模型并行和数据并行下的切分;两个worker间通信量化步骤,用于两个worker间层内通信与层间通信中通信量化,从而实现并行模型状态空间的自动搜索;多个worker间通信协议及形式化验证步骤,用于多个worker间的可信通信。本发明研究在多加速器环境中,研究对数据流(特征图,卷积核,梯度张量)的划分,并使用动态规划的自动搜索技术而不是枚举算法实现这些划分的最优化;研究并行类型与不同权重层间的通信,量化这些通信,最终使得训练一个深度模型期间的总的通信量最小。以往的研究对卷积丰富的神经网络,较多采用数据并行,对于模型规模较大的神经网络,较常采用模型并行,通常是依经验而定。本发明能够自动找到最小通信量的张量切分组合方式。
- 一种神经网络训练并行方法
- [发明专利]一种可旋转持续制冷样品台-CN202211130298.9有效
-
刘晓斌;宋岚;张科阳;李涛
-
常州隆斯克普电子科技有限公司
-
2022-09-16
-
2023-01-03
-
G01N1/42
- 本发明提供一种可旋转持续制冷样品台,涉及电子显微镜技术领域,所述可旋转持续制冷样品台包括:样品台本体,所述样品台本体通过转轴与底部的转动传动装置连接,所述样品台本体下方的转轴上套设有制冷环,所述制冷环通过制冷连接件与制冷装置连接。本发明将样品台本体通过转轴与转动传动装置连接,同时在样品台本体下方的转轴上套设制冷环,并通过制冷连接件将所述制冷环与制冷装置连接,这样,样品台本体随转轴旋转过程中一直与制冷连接件保持连接,从而在样品台本体整个旋转过程中制冷装置可以通过制冷连接件和制冷环对样品台本体进行制冷,从而保证样品台本体在旋转的同时进行制冷。
- 一种旋转持续制冷样品
|