[发明专利]基于多相机颜色一致性的颌面重建方法、设备及介质

说明书

本发明涉及图像处理技术领域，为一种基于多相机颜色一致性的颌面重建方法、设备及介质，包括；S1：采用多个相机获取不同视角的人脸图像；S2：对人脸图像进行人像解析，得到颌面分割结果图，确定颌面重建区域；S3：将步骤S1得到的人脸图像，以及步骤S2得到的分割结果进行图像融合，得到融合图像；S4：将步骤S3得到的融合图像进行整体粗糙颜色调整；S5：将步骤S4得到的粗糙颜色调整结果进行全局精细平滑；S6：将步骤S5得到的精细全局平滑结果进行局部精细平滑；本发明有效解决多相机颌面重建颌面信息质量低的问题，提高了颌面重建的精确度，有效将多相机下的颜色统一化。

技术领域

本发明涉及图像处理技术领域，具体为一种基于多相机颜色一致性的颌面重建方法、设备及介质。

背景技术

颌面重建是医疗应用中重要的组成部分。其中，颌骨重建是颌面部外科医生面临的最常见的挑战之一。颌骨在支撑口腔内牙齿方面起着重要作用。医生需要根据图像、设计和制造技术来模拟颌骨的真实形态，从而改进颌骨的重建手术，颌面的三维重建是颌骨正畸的基础性技术。颌面三维重建的目的是确保患者术后美学尽可能接近其理想或者创伤前的状态。传统的图像技术往往是医生的依据，但由于手术视野小，缺乏解剖参考位置，以及调整前后的对比，这很难实现最佳手术计划的定义和术中指导的特定导航系统。

以往的技术分为两种：一种基于深度学习的单个相机进行的颌骨重建，但是由于透视投影的性质，它们不能重建实际的颌面尺寸。现有的技术更多的是采用第二种方法，基于多相机的颌面三维重建。然而，当使用多台相机以不同视角拍摄固定人脸图像时，由于环境以及相机本身的原因，采集的图像色调差异较大，而图像作为重建后纹理贴图的唯一来源，直接影响了重建的质量，导致重建精确度低。

因此有必要对基于多相机颜色一致性的颌面重建方法、设备及介质进行进一步的改进，以解决上述问题。

发明内容

本申请的目的：在于解决和克服现有技术和应用的不足，提供一种基于多相机颜色一致性的颌面重建方法、设备及介质，有效解决多相机颌面重建颌面信息质量低的问题，提高了颌面重建的精确度，有效将多相机下的颜色统一化。

本申请的目的是通过如下技术方案来完成的，一种基于多相机颜色一致性的颌面重建方法，包括以下步骤：

S1：采用多个相机获取不同视角的人脸图像；

S2：对人脸图像进行人像解析，得到颌面分割结果图，确定颌面重建区域；

S3：将步骤S1得到的人脸图像，以及步骤S2得到的分割结果进行图像融合，得到融合图像；

S4：将步骤S3得到的融合图像进行整体粗糙颜色调整；

S5：将步骤S4得到的粗糙颜色调整结果进行全局精细平滑；

S6：将步骤S5得到的精细全局平滑结果进行局部精细平滑；

其中，所述步骤S2具体包括：

S21.将人脸图像输入编码器得到纹理特征F_t和结构特征F_s；

S22.纹理特征F_t被划分为特定的纹理特征一F_ti；

S23.结构特征F_s将图像划分为特定的感兴趣区域，得到感兴趣特征F_si；

S24.通过解码器的作用将纹理特征一F_ti和感兴趣特征F_si恢复出特定区域的目标。

优选地，将人像图像中呈现的结构和纹理信息H×W×3嵌入到一个结构张量，维度为H/16×H/16×21和纹理向量，维度为1×1×2048中。