[发明专利]核酸采样监测方法、装置、系统与计算机可读存储介质

权利要求书

1.一种核酸采样监测方法，其特征在于，所述核酸采样监测方法包括如下步骤：

在检测到启动指令时，获取被采样人的人脸视频流，并根据所述人脸视频流确定所述被采样人的嘴部是否张开；

若确定所述嘴部张开，则基于所述人脸视频流获取所述被采样人的口腔二维图像和口腔深度图像；

根据所述口腔二维图像、所述口腔深度图像和预设相机参数，确定并提示是否采样成功；

其中，所述根据所述口腔二维图像、所述口腔深度图像和预设相机参数，确定并提示是否采样成功的步骤包括：

将所述口腔二维图像输入预先创建的检测模型，通过所述检测模型确定所述口腔二维图像中的咽拭子的二维坐标集合和目标采样部位的二维坐标集合；

根据所述预设相机参数、所述口腔深度图像、所述咽拭子的二维坐标集合和所述目标采样部位的二维坐标集合，计算出所述咽拭子的三维坐标和所述目标采样部位的三维坐标；

根据所述咽拭子的三维坐标和所述目标采样部位的三维坐标，确定并提示是否采样成功；

其中，所述根据所述咽拭子的三维坐标和所述目标采样部位的三维坐标，确定并提示是否采样成功的步骤包括：

计算所述咽拭子的三维坐标和所述目标采样部位的三维坐标的欧氏距离，并将所述欧氏距离与预设距离阈值进行对比；

若所述欧氏距离小于所述预设距离阈值，则获取所述咽拭子和所述目标采样部位的接触时长，并将所述接触时长与预设时长阈值进行对比；

若所述接触时长大于所述预设时长阈值，则确定并提示采样成功；

若所述欧氏距离不小于所述预设距离阈值，则确定采样未成功，提示采样人员移动所述咽拭子，重复执行步骤：将所述口腔二维图像输入预先创建的检测模型，通过所述检测模型确定所述口腔二维图像中的咽拭子的二维坐标集合和所述目标采样部位的二维坐标集合。

2.如权利要求1所述的核酸采样监测方法，其特征在于，所述根据所述人脸视频流确定所述被采样人的嘴部是否张开的步骤包括：

将所述人脸视频流输入预先创建的关键点识别模型，通过所述关键点识别模型确定所述人脸视频流的当前帧图像中所述被采样人的嘴部关键点集合；

根据所述嘴部关键点集合和所述人脸视频流，确定嘴部关键点坐标集合；

根据所述嘴部关键点坐标集合，计算出嘴部张开系数，并根据所述嘴部张开系数确定所述被采样人的嘴部是否张开。

3.如权利要求2所述的核酸采样监测方法，其特征在于，所述根据所述嘴部关键点坐标集合，计算出嘴部张开系数，并根据所述嘴部张开系数确定所述被采样人的嘴部是否张开的步骤包括：

根据所述嘴部关键点坐标集合中的嘴角关键点坐标，计算出嘴角间距；

根据所述嘴部关键点坐标集合中的上唇中心关键点坐标和下唇中心关键点坐标，计算出上下唇间距；

根据所述嘴角间距和所述上下唇间距计算出嘴部张开系数，并将所述嘴部张开系数与预设嘴部张开阈值进行对比；

若所述嘴部张开系数大于预设嘴部张开阈值，则确定所述被采样人的嘴部张开；

若所述嘴部张开系数不大于预设嘴部张开阈值，则确定所述被采样人的嘴部未张开，并将人脸视频流的下一帧图像作为当前帧图像，重复执行步骤：通过所述关键点识别模型确定所述人脸视频流的当前帧图像中所述被采样人的嘴部关键点集合。

4.如权利要求1所述的核酸采样监测方法，其特征在于，所述根据所述预设相机参数、所述口腔深度图像、所述咽拭子的二维坐标集合和所述目标采样部位的二维坐标集合，计算出所述咽拭子的三维坐标和所述目标采样部位的三维坐标的步骤包括：

根据所述预设相机参数、所述口腔深度图像和所述咽拭子的二维坐标集合，计算出所述口腔二维图像中用于表征所述咽拭子的第一像素点集合中的每个像素点对应的三维坐标；

根据所述第一像素点集合中的每个像素点对应的三维坐标，计算出所述咽拭子的三维坐标；

根据所述预设相机参数、所述口腔深度图像和所述目标采样部位的二维坐标集合，计算出所述口腔二维图像中用于表征所述目标采样部位的第二像素点集合中的每个像素点对应的三维坐标；

根据所述第二像素点集合中的每个像素点对应的三维坐标，计算出所述目标采样部位的三维坐标。