[发明专利]图像质量的评价及模型生成方法、装置、设备和存储介质有效

专利信息
申请号: 201910704347.7 申请日: 2019-07-31
公开(公告)号: CN110428412B 公开(公告)日: 2022-06-03
发明(设计)人: 邓桥 申请(专利权)人: 北京奇艺世纪科技有限公司
主分类号: G06T7/00 分类号: G06T7/00;G06V10/80;G06V10/774;G06K9/62
代理公司: 北京柏杉松知识产权代理事务所(普通合伙) 11413 代理人: 孙翠贤;丁芸
地址: 100080 北京市海淀区*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 图像 质量 评价 模型 生成 方法 装置 设备 存储 介质
【权利要求书】:

1.一种模型生成方法,其特征在于,所述方法包括:

针对多个样本图像,分别提取各样本图像的基础特征和深度特征,并将各基础特征和各深度特征输入预设的融合模型,得到各融合特征;其中,所述基础特征为用于反映图像的展示效果且具备可解释性的特征;所述深度特征为用于反映图像内容的特征;所述融合特征,包括:第一融合子特征和第二融合子特征;其中,所述第一融合子特征包括:计算所述基础特征和所述深度特征之间的外积得到的所述基础特征和所述深度特征之间全部组合形式的特征;所述第二融合子特征包括:对所述基础特征和所述深度特征进行组合后,得到的拼接形式的特征;

将多个样本图像的所述第一融合子特征和所述第二融合子特征,分别输入评价模型进行训练,得到所述第一融合子特征的第一预测评价结果,以及所述第二融合子特征的第二预测评价结果;

基于所述第一预测评价结果、所述第二预测评价结果、所述多个样本图像的评价结果标签以及预设的损失函数,判断处于当前训练阶段的评价模型是否收敛;

如果收敛,将处于当前训练阶段的评价模型作为图像评价模型。

2.根据权利要求1所述的方法,其特征在于,所述基于所述第一预测评价结果、所述第二预测评价结果、所述多个样本图像的评价结果标签以及预设的损失函数,判断处于当前训练阶段的评价模型是否收敛,包括:

将所述第一预测评价结果、所述第二预测评价结果和所述多个样本图像的评价结果标签,输入所述预设的损失函数,获得第一误差和第二误差之和;其中,所述第一误差为所述第一预测评价结果与所述样本图像的评价结果标签之间的误差;所述第二误差为所述第二预测评价结果与所述样本图像的评价结果标签之间的误差;

根据所述第一误差和第二误差之和,判断处于当前训练阶段的评价模型是否收敛。

3.根据权利要求1或2所述的方法,其特征在于,在所述判断处于当前训练阶段的评价模型是否收敛之后,所述方法还包括:

如果不收敛,调整处于当前训练阶段的评价模型的模型参数,得到调整后的评价模型;分别将所述多个样本图像输入所述调整后的评价模型,并重复上述进行训练和调整所述模型参数的步骤,直至所调整后的评价模型收敛。

4.一种图像质量的评价方法,其特征在于,所述方法包括:

分别提取待评价图像的基础特征和深度特征;其中,所述基础特征为用于反映图像的展示效果且具备可解释性的特征;所述深度特征为用于反映图像内容的特征;

将所述基础特征和所述深度特征输入预设的融合模型,得到融合特征;所述融合特征,包括:第一融合子特征和第二融合子特征;其中,所述第一融合子特征包括:计算所述基础特征和所述深度特征之间的外积得到的所述基础特征和所述深度特征之间全部组合形式的特征;所述第二融合子特征包括:对所述基础特征和所述深度特征进行组合后,得到的拼接形式的特征;

将所述融合特征输入图像评价模型,得到所述待评价图像的质量评价结果;其中,所述图像评价模型为利用权利要求1或2所述的方法生成的。

5.根据权利要求4所述的方法,其特征在于,

当所述融合特征包括所述第一融合子特征时,所述将所述基础特征和所述深度特征输入预设的融合模型,得到融合特征,包括:计算所述基础特征和所述深度特征之间的外积;对所述外积进行降维处理,得到所述第一融合子特征;

和/或,

当所述融合特征包括所述第二融合子特征时,所述将所述基础特征和所述深度特征输入预设的融合模型,得到融合特征,包括:对所述深度特征进行降维处理,得到降维后的深度特征;拼接所述基础特征与所述降维后的深度特征,得到所述第二融合子特征。

6.根据权利要求4或5所述的方法,其特征在于,所述待评价图像为RGB图像;所述待评价图像的基础特征,包括:第一基础特征、第二基础特征以及第三基础特征中的至少一种;

其中,所述第一基础特征为所述待评价图像的基础特征中,在像素层面反映待评价图像展示效果的特征;所述第二基础特征为所述待评价图像的基础特征中,在待评价图像的统计层面反映展示效果的特征;所述第三基础特征为所述待评价图像的基础特征中,在待评价图像的变换域层面反映展示效果的特征。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910704347.7/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top