[发明专利]一种三维颜面对称参考平面智能构建方法

说明书

本发明涉及一种三维颜面对称参考平面智能构建方法，包括：为获得三维颜面数据兴趣区，首先将三维颜面数据投影至二维平面图像，通过提取二维图像的人脸关键点获得图像中解剖区域的关键点，继而将图像上的关键点映射回三维人脸上，得到三维颜面数据的人脸关键点，并通过区域扩充得到三维颜面数据兴趣区，进而建立平面反射对称神经网络智能构建三维颜面对称参考平面；本发明可实现符合三维颜面对称参考平面的准确、高效构建，为口腔临床数字化诊疗提供一种新的对称参考平面构建解决方案。

技术领域

本发明涉及一种对称参考平面构建方法，具体涉及一种三维颜面对称参考平面智能构建方法。

1背景

颜面部美学评估、面部对称性分析是口腔各个学科共同关注的基础问题，在医学和美学要求较高的学科如口腔正畸、口腔颌面外科、口腔修复领域尤为关键。颜面部不对称性分析在口腔临床诊断、手术设计、疗效评价等环节均起到至关重要的作用，而不对称性分析往往基于颜面部的对称参考平面(Symmetry Reference Plane，SRP)，也称正中矢状平面(Median Sagittal Plane，MSP)，对称参考平面的构建精度直接影响着后续诊疗效果的准确性与可靠性。

由于先天或环境因素的影响，没有绝对对称的人脸，因而基于自然生物体复杂、无规则分布的不对称几何人脸信息，构建其对称参考平面结果并不唯一。因此，研究智能化、自动化的三维颜面对称参考平面新算法，可为口腔临床提供更加高效、准确的三维颜面数据对称性分析解决方案。

2国内外研究发展动态及现状

既往文献中三维颜面对称参考平面构建方法主要分为人工定义方法、半自动化算法和自动化算法。人工定义方法常基于颜面部三维数字模型上重要解剖标志点人工构建对称参考平面，通常包括中线解剖标志点及双侧解剖标志点。在标志点的选择标准问题上，不同学者所持观点不一，不同使用者、不同研究对象构建的对称参考平面可重复性欠佳。半自动化算法则是基于人工干预和软件计算的三维颜面对称参考平面构建方法，称为“本体-镜像关联算法”。“本体-镜像关联算法”是一种应用软件构建对称参考平面的半自动化算法，依据本体模型与镜像模型重叠匹配的原理，可分为参考标志点的普氏分析算法和不参考标志点的迭代最近点算法。本体-镜像关联算法提高了对称参考平面构建的自动化程度，但为获得较为理想的重叠效果，仍难以避免人工选择标志点或区域的问题。

近年来人工智能技术在口腔医学领域图像处理、疾病诊断与决策等方面得到了广泛应用。基于人工神经网络的深度学习算法拥有强大的特征提取和学习能力，能够合理处理复杂形态信息，并从中学习隐含规律，在各种智能任务中表现出优越性能，具备巨大的应用潜力。深度学习算法为三维模型对称参考平面的构建提供了新的思路，刘新国等人提出了点云的对称性分析Sym-Net网络，基于PointNet++网络进行特征提取，该监督学习网络模型通过对规则几何模型“中线”及“双侧”点云进行分类，由“双侧”点确定对称平面。徐凯等基于单张RGB-D图像提出预测三维模型对称平面的SymmetryNet网络，该监督学习网络模型通过预测模型旋转和反射对称性，确定点云间两点的对应关系及对称平面。上述模型对于局部形状具有较好的鲁棒性，但是监督学习需专家标注数据，在数据量较大的数据集中进行训练显示出其局限性。深度学习算法构建三维几何模型对称参考平面的研究，但尚未有直接基于三维颜面数据，应用深度学习算法智能构建对称参考平面的研究。

3回顾总结

通过上述对以往研究的回顾，可以认为：自动化程度高、临床经验依赖程度低、准确稳定的三维颜面对称参考平面的构建算法是目前的发展方向，现有研究各种半自动化和自动化算法，都在不同程度上向着这个目标努力。基于ICP和PA算法的半自动化算法研究仍受人为筛选面部区域、人工定义面部重要解剖标志点的限制，算法的自动化程度有限；自动化算法目前在计算机视觉等领域针对规则几何数据已有研究，但针对口腔医学非规则三维颜面数据的研究尚未报道。上述算法目前均还未实现自动、智能、准确、稳定的三维颜面对称参考平面构建。

参考文献