[发明专利]一种视频处理方法及控制平台有效
申请号: | 201711147343.0 | 申请日: | 2017-11-17 |
公开(公告)号: | CN108012156B | 公开(公告)日: | 2020-09-25 |
发明(设计)人: | 吴伟华;贺武;李殿平 | 申请(专利权)人: | 深圳市华尊科技股份有限公司 |
主分类号: | H04N19/436 | 分类号: | H04N19/436;H04N19/426;H04N19/44;G06F9/50;G06N3/04;G06T1/20 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;熊永强 |
地址: | 518000 广东省深圳市福田*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 处理 方法 控制 平台 | ||
1.一种视频处理方法,其特征在于,包括:
接收由客户端发送的解析请求,所述解析请求中携带待处理影像数据的属性信息,所述属性信息包括:内存大小、数据类型、数据格式和数据来源;
根据所述属性信息为所述待处理影像数据配置GPU资源;
通过所述GPU资源接收所述待处理影像数据,并采用GPU高速共享显存解码技术对所述待处理影像数据进行解码操作,具体为:通过共享解码过程中的context资源,即共享显存实现1路*(内部硬解器context资源)+n路*(视频纹理缓冲区),实现多路视频并行解码;
通过多级压缩优化方法对深度神经网络模型进行加速操作;
通过所述加速操作后的深度神经网络模型对所述解码操作后的待处理影像数据进行视频结构化分析,得到特征集;
将所述特征集发送给所述客户端;
其中,所述通过多级压缩优化方法对深度神经网络模型进行加速操作,包括:
获取所述深度神经网络模型的精度阈值;
根据所述多级压缩优化方法对深度神经网络模型进行加速操作,所述多级压缩优化方法依次执行顺序为:层融合操作、通道稀疏操作、核规整化操作以及权值INT8量化,所述加速操作后的深度神经网络模型的精度高于所述精度阈值;
其中,所述层融合操作用于将conv+bn+scale三层变成只计算conv,具体按照如下公式实现:
其中,C1、C2是Convolution层权重,B1、B2、B3是BatchNorm层的权重,S1、S2是Scale层权重; 融合后,将上述公式第一项作为C1,后三项作为C2,更新Convolution权重,即消除BatchNorm和Scale层,x代表Conv层输入特征,y代表Scale层输出特征。
2.根据权利要求1所述的方法,其特征在于,所述根据所述属性信息为所述待处理影像数据配置GPU资源,包括:
获取服务器集群的资源状态信息;
根据所述服务器集群的资源状态信息以及所述属性信息确定所述待处理影像数据的GPU资源。
3.根据权利要求1或2所述的方法,其特征在于,所述通过所述加速操作后的深度神经网络模型对所述解码操作后的待处理影像数据进行视频结构化分析,得到特征集,包括:
通过所述加速操作后的深度神经网络模型对所述解码操作后的待处理影像数据进行目标检测,得到目标,并对所述目标进行特征比对,以及识别,并确定所述目标的关键特征,得到所述特征集。
4.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
获取当前网络速率;
在所述当前网络速率以及所述待处理影像数据的内存大小满足预设条件时,执行所述根据所述属性信息为所述待处理影像数据配置GPU资源的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市华尊科技股份有限公司,未经深圳市华尊科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711147343.0/1.html,转载请声明来源钻瓜专利网。