[发明专利]卷积神经网络的加速运算方法、服务器及存储介质有效

专利信息
申请号: 201710544330.0 申请日: 2017-07-05
公开(公告)号: CN107451654B 公开(公告)日: 2021-05-18
发明(设计)人: 谌璟;孙庆新 申请(专利权)人: 深圳市自行科技有限公司
主分类号: G06N3/04 分类号: G06N3/04
代理公司: 深圳市世纪恒程知识产权代理事务所 44287 代理人: 胡海国
地址: 518000 广东省深圳市南山区南山街*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 卷积 神经网络 加速 运算 方法 服务器 存储 介质
【说明书】:

发明公开了一种卷积神经网络的加速运算方法、服务器及存储介质,通过对待拆分map拆分成预设数量的子map,并获取各子map的位置信息;对各子map分别进行跨层运算,获取每一层运算的中间结果,将所述中间结果存入内部存储器中,提取所述内部存储器中的中间结果参与下一层运算,从而充分利用内部存储器并复用资源,减少了与外部存储器的交互时间,大大提升CNN的运算速度和资源使用效率,使得CNN能够在嵌入式终端内高速高效的运行。

技术领域

本发明涉及计算机应用领域,尤其涉及一种卷积神经网络的加速运算方法、服务器及存储介质。

背景技术

机器学习(Machine Learning,ML)和人工智能(Artificial Intelligence,AI)是研究如何让计算机去完成需要人的智力才能胜任的工作,是研究如何应用计算机的软硬件来模拟人类某些行为、思想的基本理论、方法和技术。AI是一门多学科交叉的科学,包含自然科学和社学科学交叉,更涉及哲学和认知科学,数学、神经生理学、心理学、计算机科学,信息科学、控制论等众多学科。因此,AI领域的理论研究和应用技术的壁垒很高,涉及到多学科协作以及实现困难等问题。

近年来,深度学习(Deep Learning,DL)进展大大推动了ML和AI的技术进步和实际应用。例如,AI为技术核心的应用已经渗透到了众多领域,安防、教育、金融、医疗、交通等等,典型应用包括:远程开户(金融、证券),智能安防、图像识别、自然语言处理、自动驾驶等等。DL是一种含多隐层的,多层感知的深度学习结构,通过组合低层特征形成更加抽象的高层表示属性类别或特征,以发现数据的分布式特征表示。卷积神经网络(ConvolutionalNeural Network,CNN)就是一种有监督下的深度学习模型。

深度学习是模拟人脑的思维方式和处理问题的方法,而人脑的计算神经元数量是百亿量级,即使是一个“小型”的CNN网络所需要的计算也非常庞大,而且几乎所有的深度学习网络均运行在中央处理器(Central Processing Unit,CPU)或CPU集群,或图形处理器(Graphics Processing Unit,GPU)或GPU集群硬件平台之上,所需要的硬件资源非常巨大,导致成本和功耗都非常大。为了能够在嵌入式终端内应用CNN,就需要在相对处理器集群弱得多的硬件平台或处理器上运行CNN,这个问题已经是目前限制CNN在终端上应用的最大技术阻碍。为此,需要研究在处理器上的进行计算资源复用的方法,能够实现CNN在低成本、资源相对较少的处理器上运行。

CNN的计算过程是逐层计算,包括卷积层、池化层和全连接层,CNN的计算过程可以采用层间复用从而降低对处理器硬件资源的需求,即所有的卷积层或池化层依次运行在相同的模块中,在设计卷积层模块和池化层模块的时候,需要按照所有层的最大资源占用情况来设计相关参数,例如卷积核的尺寸、输入/输入卷积神经网络各层输入及输出的特征数据map的尺寸和数量等,CNN网络有一个特点:底层的map尺寸大,但是数量少,高层的map尺寸小,但是数量多。在层间复用方案中,需要设计按照大尺寸、大数量的标准来设计双端口随机存取存储器(random access memory,RAM)又称作“随机存储器”,是与CPU直接交换数据的内部存储器,将会造成计算资源的低效使用,同时也制约了并行路数,影响实时性。

发明内容

本发明的主要目的在于提出一种卷积神经网络的加速运算方法、服务器及存储介质,旨在解决现有技术中的卷积神经网络计算量大,难以充分利用硬件资源加速计算的技术问题。

为实现上述目的,本发明提供一种卷积神经网络的加速运算方法,所述卷积神经网络的加速运算方法包括以下步骤:

获取待拆分map;

对所述待拆分map进行卷积和池化操作,将进行卷积和池化操作后的待拆分map拆分成预设数量的子map,并获取各子map的位置信息;

对各子map分别进行跨层运算,获取每一层运算的中间结果,将所述中间结果存入内部存储器中;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市自行科技有限公司,未经深圳市自行科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201710544330.0/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top