[发明专利]基于人脸检测的信息交互方法、装置、设备及存储介质在审
| 申请号: | 202110547862.6 | 申请日: | 2021-05-19 |
| 公开(公告)号: | CN115460460A | 公开(公告)日: | 2022-12-09 |
| 发明(设计)人: | 罗飞;周诗文 | 申请(专利权)人: | 北京字跳网络技术有限公司 |
| 主分类号: | H04N21/4402 | 分类号: | H04N21/4402;H04N21/488;H04N21/431;H04N21/41;G06V40/16;G06V20/40 |
| 代理公司: | 上海光栅知识产权代理有限公司 31340 | 代理人: | 关浩;马雯雯 |
| 地址: | 100190 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 检测 信息 交互 方法 装置 设备 存储 介质 | ||
1.一种基于人脸检测的信息交互方法,其特征在于,应用于第一终端设备,所述方法包括:
获取用户面部图像,所述用户面部图像为所述第一终端设备播放在线视频时采集到的用户面部图像;
对所述用户面部图像进行特征识别,确定专注度信息,其中,所述专注度信息表征用户通过所述第一终端设备观看所述在线视频的的过程中,所述用户注视所述在线视频时长占全部时长的比例;
根据所述专注度信息,向第二终端设备发送提示信息,所述提示信息用于指示所述第二终端设备显示所述专注度信息。
2.根据权利要求1所述的方法,其特征在于,获取用户面部图像,包括:
采集所述用户的多帧面部图像;
根据所述用户面部图像,确定专注度信息,包括:
对所述多帧面部图像中的每一帧面部图像进行面部特征识别,确定所述多帧面部图像中的注视图像的帧数,所述注视图像为所述多帧面部图像中表征所述用户注视所述在线视频的图像;
根据所述注视图像的帧数与所述多帧面部图像的帧数之间的比值,确定所述专注度信息。
3.根据权利要求2所述的方法,其特征在于,对所述多帧面部图像中的每一帧面部图像进行面部特征识别,确定所述多帧面部图像中的注视图像的帧数,包括:
对所述多帧面部图像分别进行图像识别,确定每一帧所述面部图像对应的面部属性信息,所述面部属性信息用于表征所述面部图像所呈现的用户面部的空间角度;
根据每一帧所述面部图像对应的面部属性信息,确定各所述面部图像是否为所述注视图像,并统计所述注视图像的帧数。
4.根据权利要求3所述的方法,其特征在于,所述面部属性信息包括用户面部的俯仰角和用户面部的偏航角,根据每一帧所述面部图像对应的面部属性信息,确定各所述面部图像是否为所述注视图像,包括:
若所述面部图像对应的用户面部的俯仰角位于第一角度区间,且所述面部图像对应的用户面部的偏航角位于第二角度区间,则确定所述面部图像为注视图像。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述提示信息中包括所述第一终端设备的标识信息和对应的专注度信息,根据所述专注度信息,向所述第二终端设备发送提示信息,包括:
若所述专注度信息小于第一专注度阈值,则向所述第二终端设备发送所述标识信息和与所述标识信息对应的专注度信息。
6.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
若所述专注度信息小于第一专注度阈值,则控制所述第一终端设备显示提醒信息,并将状态标识设置为第一状态;
若所述专注度信息大于第一专注度阈值,则将所述状态标识设置为第二状态;
根据所述专注度信息,向第二终端设备发送对应的提示信息,包括:
若所述专注度信息小于第一专注度阈值,且所述状态标识为第一状态,则向第二终端设备发送对应的提示信息。
7.根据权利要求1-4任一项所述的方法,其特征在于,所述用户面部图像包括多帧面部图像;所述方法还包括:
根据所述多帧面部图像,确定至少两个不同的时间区间对应的专注度信息;
统计各所述时间区间对应的专注度信息,生成专注度统计信息,所述专注度统计信息用于表征所述专注度信息在不同时间区间的分布情况;
向第二终端设备发送所述专注度统计信息。
8.一种基于人脸检测的信息交互方法,其特征在于,应用于第二终端设备,所述方法包括:
录制并发送在线视频;
接收第一终端设备发送的提示信息,所述提示信息用于指示所述第二终端设备显示专注度信息,所述专注度信息表征用户通过所述第一终端设备观看所述在线视频的过程中,所述用户注视所述在线视频时长占全部时长的比例;
根据所述提示信息,在录制所述在线视频的同时,显示所述专注度信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字跳网络技术有限公司,未经北京字跳网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110547862.6/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置





