[发明专利]非接触式多生理参数的同步检测方法和系统

说明书

本发明提供一种非接触式多生理参数的同步检测方法、系统、存储介质和电子设备，涉及生理参数检测技术领域。本发明中，将第一时空特征图、第二时空特征图分别输入共享网络的两个结构相同但参数不共享的神经网络中，分别获取不同层次的特征提取图，将相同层次的特征提取图输入共享网络对应的特征融合块，获取当前层次的融合特征，并分别输入各个子任务网络对应的注意力模块中，结合上一层注意力模块的输出，获取当前层注意力模块输出的任务相关特征；考虑到不同模态、不同空间位置以及不同通道的重要性，可以有效的从大量级联特征中提取出可靠且对任务有显著效果的特征，提高算法性能表现。

技术领域

本发明涉及生理参数检测技术领域，具体涉及一种非接触式多生理参数的同步检测方法、系统、存储介质和电子设备。

背景技术

当今社会，随着生活水平的不断提高，人们的健康观念也不断增强，各种生理信息越来越受到人们的重视。

目前，现有的生理参数检测方法或系统大都是接触式的，例如手环、贴片式设备、指夹式设备等，这类设备体积较小，较为便携，在目前多生理参数检测领域占据主导地位；即使少部分的现有非接触式生理参数检测方法也大都是单任务的，即只检测单一生理参数(心率、血压、呼吸率等)，或者通过二次处理得到多个生理参数，例如通过单任务网络得到PPG信号，再对PPG信号进行处理得到心率、心率变异性、呼吸率等信号。如果需要同时采集多种生理信号则需要同时搭建多个生理参数检测模型，不仅极大的增加了计算量和设备成本，也无法实现多项生理指标的同步输出。

因此，亟需提供一种非接触式多生理参数同步检测技术方案。

发明内容

(一)解决的技术问题

针对现有技术的不足，本发明提供了一种非接触式多生理参数的同步检测方法、系统、存储介质和电子设备，解决了无法实现多项生理指标的同步输出的技术问题。

(二)技术方案

为实现以上目的，本发明通过以下技术方案予以实现：

一种非接触式多生理参数的同步检测方法，预先构建一个带有注意力机制的多任务网络架构，该多任务网络架构包括共享网络和若干子任务网络；所述同步检测方法包括：

S1、分别采集受试者的可见光视频和热红外视频；

S2、预处理所述可见光视频和热红外视频，获取所述可见光视频中人脸图像对应的第一时空特征图，以及所述热红外视频中人脸图像对应的第二时空特征图；

S3、将所述第一时空特征图、第二时空特征图分别输入所述共享网络的两个结构相同但参数不共享的神经网络中，分别获取不同层次的特征提取图；

S4、将所述第一时空特征图、第二时空特征图相同层次的特征提取图输入所述共享网络对应的特征融合块，获取当前层次的融合特征；

S5、将当前层次的融合特征分别输入各个所述子任务网络对应的注意力模块中，结合上一层注意力模块的输出，获取当前层注意力模块输出的任务相关特征；

S6、将各层注意力模块输出的任务相关特征共同输入所属子任务网络的多层次特征融合模块中，获取多层次融合特征，预测对应的生理参数指标。

优选的，所述S2包括：

S21、根据所述可见光视频和热红外视频的图像序列，分别采用密集人脸对齐方法进行所述受试者的人脸检测与面部关键点标记；

S22、确定受试者人脸图像的若干感兴趣区域，分别提取所述可见光视频和热红外视频每一帧图像序列对应的iPPG信号；

S23、按照时间顺序拼接所述iPPG信号，获取所述第一时空特征图和第二时空特征图。