[发明专利]视频目标分割方法、设备、存储介质及程序产品在审
申请号: | 202210108563.7 | 申请日: | 2022-01-28 |
公开(公告)号: | CN114445750A | 公开(公告)日: | 2022-05-06 |
发明(设计)人: | 胡立;张邦;潘攀 | 申请(专利权)人: | 阿里巴巴(中国)有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/26;G06V10/82;G06N3/04;G06N3/08 |
代理公司: | 北京同钧律师事务所 16037 | 代理人: | 李小波;许怀远 |
地址: | 310056 浙江省杭州市滨江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 目标 分割 方法 设备 存储 介质 程序 产品 | ||
本申请提供一种视频目标分割方法、设备、存储介质及程序产品,其中方法包括:确定待处理的视频以及所述视频中待分割的目标对象;通过预先构建的目标分割模型,基于循环特征依次对所述视频中待处理的各帧图像进行处理,从各帧图像中分割出目标对象;其中,所述目标分割模型包括循环特征更新模型,用于在视频处理过程中,根据当前处理的图像对所述循环特征进行更新。本申请可以通过模型实现循环特征的动态更新,不仅能够使循环特征融合已处理的多帧图像的信息,还能够有效避免特征的堆叠,循环特征的大小可以不随视频的推进而逐渐增大,减少了内存占用,避免长视频因内存不够而影响分割效果,降低了视频目标分割算法的成本。
技术领域
本申请涉及视频处理技术领域,尤其涉及一种视频目标分割方法、设备、存储介质及程序产品。
背景技术
视频目标分割能够从视频的各帧图像中确定出目标对象所在的区域,在目标跟踪、视频抠图等场景有着重要的作用。
在视频目标分割过程中,可以存储已分割的图像信息,指导后续图像的分割。该方案的不足之处在于,随着视频处理的不断推进,已分割的图像信息会在内存中不断堆叠,占用内存较大,并且,对于较长的视频,可能有限的内存无法支持无限增长的特征存储,影响分割效果。
发明内容
本申请实施例的主要目的在于提供一种视频目标分割方法、设备、存储介质及程序产品,以降低对视频进行目标分割的成本,提升分割效果。
第一方面,本申请实施例提供一种视频目标分割方法,包括:
确定待处理的视频以及所述视频中待分割的目标对象;
通过预先构建的目标分割模型,基于循环特征依次对所述视频中待处理的各帧图像进行处理,从各帧图像中分割出目标对象;其中,所述目标分割模型包括循环特征更新模型,用于在视频处理过程中,根据当前处理的图像对所述循环特征进行更新。
可选的,所述目标分割模型还包括:编码器、特征读取模块、解码器;
其中,在处理视频中的任意一帧图像时,所述编码器用于提取所述图像对应的图像特征;
所述特征读取模块用于计算得到所述图像特征和当前的循环特征的关联信息;
所述解码器用于根据所述关联信息,得到所述图像的目标分割结果。
可选的,所述目标对象的数量为至少一个,所述方法还包括:
根据所述视频的目标分割结果,得到各个目标对象的目标视频;其中,所述目标对象的目标视频为在所述待处理的视频中去除所述目标对象的背景后得到的视频,或者,所述目标视频由所述待处理的视频中目标对象所在的多帧图像构成;
输出各个目标对象的目标视频和/或目标视频中的至少部分图像。
可选的,输出各个目标对象的目标视频和/或目标视频中的至少部分图像,包括:
展示所述目标视频和/或所述目标视频中的至少部分图像;
根据用户对所述目标视频和/或所述目标视频中的至少部分图像的编辑操作,生成所述目标对象的推广视频和/或推广图像。
可选的,对所述视频中图像的处理操作包括:
获取视频中待处理的图像以及当前的循环特征,并提取所述图像对应的图像特征;其中,所述循环特征为根据所述视频中已处理的图像.确定的特征;
根据所述图像特征与循环特征,确定所述待处理的图像的目标分割结果,并将所述图像特征和循环特征输入到循环特征更新模型,得到更新后的循环特征,以根据更新后的循环特征处理所述视频中下一帧待处理的图像。
可选的,确定待处理的视频以及所述视频中待分割的目标对象,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴(中国)有限公司,未经阿里巴巴(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210108563.7/2.html,转载请声明来源钻瓜专利网。