[发明专利]一种基于跨模态协同推理的图像美学质量评价方法在审
| 申请号： | 202011609604.8 | 申请日： | 2020-12-30 |
| 公开（公告）号： | CN112580636A | 公开（公告）日： | 2021-03-30 |
| 发明（设计）人： | 阮杰;高飞 | 申请（专利权）人： | 杭州电子科技大学 |
| 主分类号： | G06K9/32 | 分类号： | G06K9/32;G06K9/46;G06K9/62;G06T7/11 |
| 代理公司： | 杭州君度专利代理事务所(特殊普通合伙) 33240 | 代理人： | 朱月芬 |
| 地址： | 310018 浙*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于跨模态协同推理的图像美学质量评价的方法。本发明包括如下步骤：步骤(1)提取多尺度视觉特征；步骤(2)基于图网络提取视觉结构特征；步骤(3)提取视觉聚合特征与文本聚合特征；利用Transformer模型提取多尺度文本特征后，利用协同注意力模块对多尺度视觉特征和多尺度文本特征进行重构，挖掘两者之间的关联关系，提取视觉聚合特征与文本聚合特征；步骤(4)多模态低秩双线性特征融合以及多任务美学质量评价，将视觉结构特征与视觉聚合特征、文本聚合特征进行低秩双线性特征融合，并利用多任务学习思想，提升图像美学质量评价性能。本发明为探索人类的美学认知机制，提升美学评价模型的可解释性，提供了一种有效的技术路线。 | ||
| 搜索关键词： | 一种 基于 跨模态 协同 推理 图像 美学 质量 评价 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于杭州电子科技大学，未经杭州电子科技大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202011609604.8/，转载请声明来源钻瓜专利网。
- 上一篇：半导体存储装置及其测试方法
- 下一篇：一种高原监察无人机用辅助装置
