[发明专利]一种基于人脸视频的非接触式心率检测装置和方法在审
申请号: | 202210332556.5 | 申请日: | 2022-03-31 |
公开(公告)号: | CN114722869A | 公开(公告)日: | 2022-07-08 |
发明(设计)人: | 胡国清;李光发;陈佳;付西敏 | 申请(专利权)人: | 华南理工大学;广东寰宇智慧医疗科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06N3/04;G06N3/08;G06V20/40;A61B5/024;G06V10/774;G06V10/82;G06V40/16 |
代理公司: | 广州市华学知识产权代理有限公司 44245 | 代理人: | 李秋武 |
地址: | 510640 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 视频 接触 心率 检测 装置 方法 | ||
1.一种基于人脸视频的非接触式心率检测方法,其特征在于:包括以下步骤,
获取不带肤色变化的人脸视频V,根据人脸视频V合成多个用于模拟真实人脸视频的视频VrPPG;
发送多个视频VrPPG作为训练样本对深度学习模型进行训练,以使深度学习模型对待检测心率的人脸图像进行信号放大,并从放大后的人脸图像中获得高信噪比的数据,进而计算得到心率。
2.按照权利要求1所述的一种基于人脸视频的非接触式心率检测方法,其特征在于:不带肤色变化的人脸视频V的获取方式为,选取一张基础图片c以及一段驱动视频Vd,通过一阶运动模型,将基础图片c与驱动视频Vd拟合成不带肤色变化的人脸视频V。
3.按照权利要求1所述的一种基于人脸视频的非接触式心率检测方法,其特征在于:获取人脸视频V后还包括以下步骤,对人脸视频V利用函数s生成脉搏波信号,将脉搏波信号s(t,f)添加到合成的视频VrPPG中,用于深度学习模型的训练,
其中,σ表示信号的尺度,f表示信号频率;t表示信号的长度;ai和bi是决定信号波形的常数;
其中,pj表示在j通道中增加的信号强度,表示经过一阶运动模型生成的人脸视频V中图像的像素值,表示添加肤色变化信号之后图像的像素值。
4.按照权利要求1所述的一种基于人脸视频的非接触式心率检测方法,其特征在于:合成视频VrPPG的实现方式包括,构建BVP曲线来模拟人脸的肤色变化,对构建的BVP曲线进行采样,采样频率与人脸视频V的帧率保持一致,采样值作为肤色信号强度并进行维度扩张之后添加到人脸视频V中,生成用于模拟真实人脸视频的视频VrPPG。
5.按照权利要求1所述的一种基于人脸视频的非接触式心率检测方法,其特征在于:合成视频VrPPG时,同步生成与视频VrPPG对应的标签,使用VrPPG作为训练样本对深度学习模型进行训练时,采用与视频VrPPG对应的标签来计算损失;采用的损失函数为,La=50L1+LssM;
其中,Lα表示总损失,L1表示正则化损失,LSSIM表示结构相似性损失。
6.按照权利要求1所述的一种基于人脸视频的非接触式心率检测方法,其特征在于:深度学习模型的训练方法包括以下步骤,首先构建一个包含多个人脸视频V的数据库,每一步训练迭代的过程中从数据库中随机选取人脸视频V;然后对选取的人脸视频V添加肤色变化,并随机调节其中函数的时间相位,将数据合成步骤的代码整合到网络训练的数据加载过程中,使数据合成与网络训练的过程同步进行。
7.按照权利要求1所述的一种基于人脸视频的非接触式心率检测方法,其特征在于:在深度学习模型训练过程中,调整数据合成算法的参数以增加合成数据种类。
8.按照权利要求1所述的一种基于人脸视频的非接触式心率检测方法,其特征在于:计算得到心率的实现方式包括,对待检测心率的人脸区域进行视频采集,对采集到的视频中每帧图像通过训练好的深度学习模型进行信号放大,计算放大后的人脸图像的均值,对计算出来的曲线进行峰值检测,分析出波峰之间的时间间隔并以此来计算该段时间内的平均心率。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华南理工大学;广东寰宇智慧医疗科技有限公司,未经华南理工大学;广东寰宇智慧医疗科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210332556.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种T型钉头成型工艺
- 下一篇:一种智能头戴设备及其眼疲劳预防缓解方法