[发明专利]视频图像的处理方法、装置和终端设备有效

专利信息
申请号: 201610697316.X 申请日: 2016-08-19
公开(公告)号: CN107347166B 公开(公告)日: 2020-03-03
发明(设计)人: 栾青;石建萍 申请(专利权)人: 北京市商汤科技开发有限公司
主分类号: H04N21/431 分类号: H04N21/431;H04N21/44
代理公司: 北京思源智汇知识产权代理有限公司 11657 代理人: 毛丽琴
地址: 100084 北京市海淀区中*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 视频 图像 处理 方法 装置 终端设备
【权利要求书】:

1.一种视频图像的处理方法,包括:

获取待处理的视频图像和待展示的业务对象,所述视频图像为直播类视频图像,所述业务对象包括包含有语义信息的特效;

确定所述视频图像的背景区域,所述背景区域为除了人物所在的区域之外的至少局部区域;

确定所述业务对象在所述视频图像中的展示位置和所述视频图像的前景区域;

根据所述展示位置判断所述业务对象与所述视频图像的前景区域是否存在重叠部分;

若存在,则采用计算机绘图方式,在所述背景区域绘制所述业务对象中除所述重叠部分之外的部分。

2.根据权利要求1所述的方法,其中,所述确定所述视频图像的背景区域包括:

通过预先训练的第一卷积神经网络模型确定所述视频图像的背景区域。

3.根据权利要求2所述的方法,其中,所述对所述第一卷积神经网络模型的预先训练包括:

获取第一样本图像的第一特征向量,其中,所述第一样本图像为包含有前景标注信息和背景标注信息的样本图像;

对所述第一特征向量进行卷积处理,获取第一特征向量卷积结果;

对所述第一特征向量卷积结果进行放大处理;

判断放大后的所述第一特征向量卷积结果是否满足卷积收敛条件;

若满足,则完成对所述第一卷积神经网络模型的训练;

若不满足,则根据放大后的所述第一特征向量卷积结果调整所述第一卷积神经网络模型的网络参数并根据调整后的所述第一卷积神经网络模型的网络参数对所述第一卷积神经网络模型进行迭代训练,直至迭代训练后的所述第一特征向量卷积结果满足所述卷积收敛条件。

4.根据权利要求1所述的方法,其中,所述确定所述业务对象在所述视频图像中的展示位置包括:

按照设定规则确定所述业务对象在所述视频图像中的展示位置;

其中,所述设定规则包括:预先设定的所述业务对象在所述视频图像的设定展示位置,或者,根据所述前景区域中的目标对象的动作检测数据,确定所述业务对象在所述视频图像中的展示位置。

5.根据权利要求4所述的方法,其中,所述根据所述前景区域中的目标对象的动作检测数据,确定所述业务对象在所述视频图像中的展示位置包括:

根据所述前景区域中的目标对象的动作检测数据,通过预先训练的、第二卷积神经网络模型确定所述业务对象在所述视频图像中的展示位置。

6.根据权利要求5所述的方法,其中,所述对所述第二卷积神经网络模型的预先训练包括:

获取第二样本图像的第二特征向量,其中,所述第二特征向量中包含有所述第二样本图像中的业务对象的位置信息和/或置信度信息,以及所述第二样本图像中目标对象的目标对象特征向量;

对所述第二特征向量进行卷积处理,获取第二特征向量卷积结果;

判断所述第二特征向量卷积结果中对应的业务对象的位置信息和/或置信度信息是否满足业务对象收敛条件,并判断所述第二特征向量卷积结果中的目标对象特征向量是否满足目标对象收敛条件;

若均满足,则完成对所述第二卷积神经网络模型的训练;

否则,调整所述第二卷积神经网络模型的网络参数并根据调整后的所述第二卷积神经网络模型的网络参数对所述第二卷积神经网络模型进行迭代训练,直至迭代训练后的业务对象的位置信息和/或置信度信息和目标对象特征向量均满足相应的收敛条件。

7.根据权利要求4所述的方法,其中,所述根据所述前景区域中的目标对象的动作检测数据,确定所述业务对象在所述视频图像中的展示位置包括:

根据所述前景区域中的目标对象的动作检测数据和所述业务对象的类型,确定所述业务对象在所述视频图像中的展示位置。

8.根据权利要求7所述的方法,其中,所述根据所述前景区域中的目标对象的动作检测数据和所述业务对象的类型,确定所述业务对象在所述视频图像中的展示位置包括:

根据所述前景区域中的目标对象的动作检测数据和所述业务对象的类型,获得所述业务对象在所述视频图像中的多个展示位置;

从所述多个展示位置中选择至少一个展示位置。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京市商汤科技开发有限公司,未经北京市商汤科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201610697316.X/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top