[发明专利]视觉处理加速器及其加速方法、芯片、计算设备在审
申请号: | 202310440751.4 | 申请日: | 2023-04-18 |
公开(公告)号: | CN116503235A | 公开(公告)日: | 2023-07-28 |
发明(设计)人: | 陆彦珩;徐淑淞;刘子豪;李思成;缪泽翔;余国生;王豪;黄林峰;范益波 | 申请(专利权)人: | 阿里巴巴达摩院(杭州)科技有限公司 |
主分类号: | G06T1/20 | 分类号: | G06T1/20;G06T9/00 |
代理公司: | 北京合智同创知识产权代理有限公司 11545 | 代理人: | 李杰;兰淑铎 |
地址: | 310023 浙江省杭州市余杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视觉 处理 加速器 及其 加速 方法 芯片 计算 设备 | ||
本申请实施例提供了一种视觉处理加速器及其加速方法、芯片、计算设备,其中,视觉处理加速器与处理器核合封于通用计算芯片中,且挂载于所述通用计算芯片的总线上;所述视觉处理加速器通过所述总线与所述处理器核交互,以根据所述处理器核的指令,对图像的编码过程和/或解码过程进行加速处理。通过本申请实施例,有效提升了针对图像或视频帧的计算效果和计算速度,较好地满足了视觉处理需求。
技术领域
本申请实施例涉及芯片技术领域,尤其涉及一种视觉处理加速器及视觉处理加速方法、芯片、及计算设备。
背景技术
视觉处理是通用计算芯片的典型应用之一,一张有200万像素点的图像,在计算中每个像素点往往都会经历基本一样的处理过程,这使得视觉处理具备计算量大、重复性强的特点。
传统的通用计算芯片都是利用CPU(Central Processing Unit,中央处理器)核中的ALU(Arithmetic Logic Unit,算术逻辑单元)完成视觉计算,而这种仅通过CPU的通用处理能力进行视觉处理计算的方式,每时钟周期至多能进行数十次计算,导致计算效果和计算速度都较差,不能有效满足视觉处理需求。
发明内容
有鉴于此,本申请实施例提供一种视觉处理加速方案,以至少部分解决上述问题。
根据本申请实施例的第一方面,提供了一种视觉处理加速器,所述视觉处理加速器与处理器核合封于通用计算芯片中,且挂载于所述通用计算芯片的总线上;所述视觉处理加速器通过所述总线与所述处理器核交互,以根据所述处理器核的指令,对图像的编码过程和/或解码过程进行加速处理。
根据本申请实施例的第二方面,提供了一种通用计算芯片,包括:处理器核和如第一方面所述的视觉处理加速器;所述视觉处理加速器挂载于所述通用计算芯片的总线上,且通过所述总线与所述处理器核交互。
根据本申请实施例的第三方面,提供了一种计算设备,包括:如第一方面所述的通用计算芯片,以及,存储器、通信接口和通信总线;所述通用计算芯片、所述存储器和所述通信接口通过所述通信总线完成相互间的通信。
根据本申请实施例的第四方面,提供了一种视觉处理加速方法,所述方法包括:通过通用计算芯片的处理器核,接收对视频图像进行解码和/或编码的指令;根据所述指令,在对视频图像进行解码过程和/或编码过程中,通过挂载于所述通用计算芯片的总线上的视觉处理加速器,对解码过程和/或编码过程进行加速处理;其中,所述视觉处理加速器与所述处理器核合封于所述通用计算芯片中。
根据本申请实施例的第五方面,提供了另一种视觉处理加速方法,所述方法包括:通过通用计算芯片的处理器核,接收对视频流进行视频转码的指令;根据所述指令,在基于所述视频流进行视频转码的过程中,通过挂载于所述通用计算芯片的总线上的视觉处理加速器,对视频转码过程中的前处理部分、内容自适应分析部分和编码部分中的至少一者进行加速处理;其中,所述视觉处理加速器与所述处理器核合封于所述通用计算芯片中。
根据本申请实施例提供的方案,通过在通用计算芯片内部设置用于视觉处理加速的硬件加速器,即视觉处理加速器,该视觉处理加速器通过总线与通用计算芯片中的处理器核进行交互,以对图像的编解码过程进行加速处理。通过这种方式,一方面,因视觉处理加速器虽通过外设方式挂载于总线上,但其仍与处理器核处于同一通用计算芯片中,对通用计算芯片的架构改变较小,具备更高的可实现性。另一方面,因视觉处理加速器和处理器核合封于同一通用计算芯片中,相较于在通用计算芯片外部挂载加速器的传统方案,本申请实施例的方案中,视觉处理加速器和处理器核因处于同一通用计算芯片中,因此,两者之间可以进行更为频繁的数据交互,且延迟更小、带宽更高,从而有效提升了针对图像或视频帧的计算效果和计算速度,较好地满足了视觉处理需求。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴达摩院(杭州)科技有限公司,未经阿里巴巴达摩院(杭州)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310440751.4/2.html,转载请声明来源钻瓜专利网。