[发明专利]图像自动裁剪方法、系统、电子设备及存储介质有效

专利信息
申请号: 202010545406.3 申请日: 2020-06-15
公开(公告)号: CN111696112B 公开(公告)日: 2023-04-07
发明(设计)人: 成丹妮;罗超;吉聪睿;胡泓 申请(专利权)人: 携程计算机技术(上海)有限公司
主分类号: G06T7/10 分类号: G06T7/10;G06T7/00;G06T7/66;G06N3/0464;G06N3/08
代理公司: 上海弼兴律师事务所 31283 代理人: 薛琦;张冉
地址: 200335 上海市*** 国省代码: 上海;31
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 图像 自动 裁剪 方法 系统 电子设备 存储 介质
【权利要求书】:

1.一种图像自动裁剪方法,其特征在于,该方法包括:

获取第一样本集和第二样本集,所述第一样本集包含若干以不同构图方式得到的第一样本图像,且每个所述第一样本图像分别标注有对应的标准中心位置,所述第二样本集包含若干第二样本图像,且每个所述第二样本图像分别标注有对应的标准美学评分;

以预先定义的不同构图方式下不同图像类别对应的权重向量为权重因子,构建机器学习模型;

根据不同构图方式下的所述第一样本图像以及对应的标准中心位置,分别对所述机器学习模型的权重因子进行训练,得到不同构图方式下不同图像类别对应的目标权重向量;

根据所述第二样本集,对预设的图像美学评估网络进行训练;

获取目标图像,并利用预先训练的语义分割模型对所述目标图像进行处理,得到所述目标图像中各个像素的图像类别向量;

根据所述目标图像中各个像素的图像类别向量、以及不同构图方式下不同图像类别对应的目标权重向量,获取所述目标图像在不同构图方式下的重心;

按照预定裁剪比例,以所述目标图像在不同构图方式下的重心为中心,分别对所述目标图像进行裁剪,得到多个侯选裁剪图像;

利用训练后的所述图像美学评估网络,分别对所述多个侯选裁剪图像进行处理,得到所述多个侯选裁剪图像对应的预测美学评分,并将预测美学评分最高的所述侯选裁剪图像作为目标裁剪图像。

2.根据权利要求1所述的图像自动裁剪方法,其特征在于,所述根据所述目标图像中各个像素的图像类别向量、以及不同构图方式下不同图像类别对应的目标权重,获取所述目标图像在不同构图方式下的重心的步骤,包括根据如下式(1)和式(2)获取所述目标图像在不同构图方式下的重心C:

Mmn=∑x,yxmynO·WX                          (1)

其中,M00表示零阶矩,M10、M01表示一阶矩,x表示所述目标图像的行像素数量,y表示所述目标图像的列像素数量,O表示所述目标图像中各个像素的图像类别向量,WX表示第x种构图方式下不同图像类别的目标权重向量。

3.根据权利要求1所述的图像自动裁剪方法,其特征在于,所述根据不同构图方式下的所述第一样本图像以及对应的标准中心位置,分别对所述机器学习模型的权重因子进行训练,得到不同构图方式下不同图像类别对应的目标权重向量的步骤,包括针对各种构图方式分别执行以下操作:

将以该种构图方式得到的所述第一样本图像的图像数据输入所述机器学习模型进行处理,得到对应的预测中心位置;

根据所述预测中心位置与对应的标准中心位置的之间差异计算所述机器学习模型的损失函数值,并根据所述机器学习模型的损失函数值调整所述机器学习模型的权重因子,直至所述机器学习模型满足对应的预定条件。

4.根据权利要求1所述的图像自动裁剪方法,其特征在于,所述机器学习模型采用逻辑回归模型。

5.根据权利要求1所述的图像自动裁剪方法,其特征在于,所述根据所述第二样本集,对预设的图像美学评估网络进行训练的步骤包括:

将所述第二样本图像的图像数据输入所述图像美学评估网络进行处理,得到对应的预测美学评分;

根据所述预测美学评分与对应的标准美学评分之间的差异计算所述图像美学评估网络的损失函数值,并根据所述图像美学评估网络的损失函数值调整所述图像美学评估网络的权重因子,直至所述图像美学评估网络满足对应的预定条件。

6.根据权利要求1所述的图像自动裁剪方法,其特征在于,所述图像美学评估网络包含特征提取层和全连接层;

在根据所述第二样本集,对预设的图像美学评估网络进行训练之前,所述方法还包括:对所述特征提取层进行预训练。

7.根据权利要求1所述的图像自动裁剪方法,其特征在于,所述语义分割模型采用全卷积网络模型。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于携程计算机技术(上海)有限公司,未经携程计算机技术(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010545406.3/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top