[发明专利]专注度评估方法、装置、计算机设备和存储介质在审
申请号: | 202110583903.7 | 申请日: | 2021-05-27 |
公开(公告)号: | CN113762062A | 公开(公告)日: | 2021-12-07 |
发明(设计)人: | 孙朝旭;刘萌;吴嫒博;孙康明;叶礼伟;夏志群;卢鑫鑫;蔡晓凤;滕达;覃伟枫 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/40;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 李文渊 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 专注 评估 方法 装置 计算机 设备 存储 介质 | ||
本申请涉及一种专注度评估方法、装置、计算机设备和存储介质。所述方法包括:从目标图像帧中提取全局图像特征;在所述目标图像帧中提取图像上下文特征;基于所述全局图像特征和所述图像上下文特征之间的融合特征,识别所述目标图像帧中目标对象的表情和姿态,以及所述目标图像帧中的物品;根据所述融合特征确定所述目标对象与所述物品之间的交互行为;依据所述表情、所述姿态、所述物品的类型和所述交互行为,确定所述目标对象的专注度。采用本方法能够提高专注度评估的准确性。
技术领域
本申请涉及人工智能技术领域,特别是涉及一种专注度评估方法、装置、计算机设备和存储介质。
背景技术
近些年来,随着人工智能技术的不断发展,使得人工智能技术被广泛应用到各种领域,例如应用到课堂教学中的专注度评估。在课堂教学中,若学生专注度较低,则很容易遗漏重要的知识点,因此通过人工智能技术对采集学生的人脸图像进行专注度的识别,可以有效地对专注度低的学生进行干预以优化课堂教学的质量。然而,通过人脸识别的方式来确定专注度,将会影响专注度评估的准确性。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提升专注度评估准确性的专注度评估方法、装置、计算机设备和存储介质。
一种专注度评估方法,所述方法包括:
从目标图像帧中提取全局图像特征;
在所述目标图像帧中提取图像上下文特征;
基于所述全局图像特征和所述图像上下文特征之间的融合特征,识别所述目标图像帧中目标对象的表情和姿态,以及所述目标图像帧中的物品;
根据所述融合特征确定所述目标对象与所述物品之间的交互行为;
依据所述表情、所述姿态、所述物品的类型和所述交互行为,确定所述目标对象的专注度。
一种专注度评估装置,所述装置包括:
全局特征提取模块,用于从目标图像帧中提取全局图像特征;
上下文特征提取模块,用于在所述目标图像帧中提取图像上下文特征;
识别模块,用于基于所述全局图像特征和所述图像上下文特征之间的融合特征,识别所述目标图像帧中目标对象的表情和姿态,以及所述目标图像帧中的物品;
交互确定模块,用于根据所述融合特征确定所述目标对象与所述物品之间的交互行为;
专注度确定模块,用于依据所述表情、所述姿态、所述物品的类型和所述交互行为,确定所述目标对象的专注度。
在一个实施例中,所述装置还包括:
视频解码模块,用于对视频流进行解码,得到图像帧序列;
图像帧抽取模块,用于从所述图像帧序列中进行图像帧抽取,得到目标图像帧;
图像处理模块,用于对所述目标图像帧进行图像处理,得到处理后的目标图像帧。
在一个实施例中,所述图像处理模块,还用于:
对所述目标图像帧进行反相处理,得到反相图像帧;
获取所述反相图像帧中各像素点的像素值;
基于所述像素值确定所述反相图像帧中各像素点对应的变换参数;
根据所述反相图像帧中各像素点的像素值和对应的所述变换参数,对所述目标图像帧进行非线性变换,得到处理后的目标图像帧。
在一个实施例中,所述全局特征提取模块,还用于:
对处理后的所述目标图像帧依序进行归一化和去噪处理,得到归一化去噪图像帧;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110583903.7/2.html,转载请声明来源钻瓜专利网。