[发明专利]深度图修复方法、装置和可读存储介质

权利要求书

1.一种深度图修复方法，其特征在于，包括：

基于原始深度图获取空洞区域集；

对原始彩色图分别进行全局分割与局部分割，获得彩色分割区域集；其中，所述彩色分割区域集用于对所述空洞区域集进行处理，以获取待修复空洞区域集；所述原始深度图和所述原始彩色图包括同一人脸；

计算所述待修复空洞区域集中各空洞像素点的深度修复值，对所述原始深度图进行修复。

2.根据权利要求1所述的深度图修复方法，其特征在于，所述对原始彩色图分别进行全局分割与局部分割，获得彩色分割区域集，包括：

对所述原始彩色图进行全局分割，获得全局分割结果；其中，所述全局分割结果包括人脸轮廓彩色分割区域和五官彩色分割区域；

对所述原始彩色图进行局部分割，获得局部分割结果；其中，所述局部分割结果包括眼镜框架彩色分割区域、鼻侧阴影彩色分割区域和嘴部口腔彩色分割区域；

将所述全局分割结果与所述局部分割结果进行图像融合，获得多个彩色分割区域。

3.根据权利要求2所述的深度图修复方法，其特征在于，所述对原始彩色图分别进行全局分割与局部分割，获得彩色分割区域集之后，还包括：

对所述多个彩色分割区域集进行筛选，剔除像素值小于预设像素阈值的彩色分割区域；基于筛选后的各彩色分割区域的像素值，对所述筛选后的多个彩色分割区域进行标记，获取第一标记结果。

4.根据权利要求3所述的深度图修复方法，其特征在于，所述彩色分割区域集用于对所述空洞区域集进行处理，以获取待修复空洞区域集，包括：

对所述空洞区域集进行连通域标记，获取第二标记结果；其中，所述空洞区域集为原始深度图中像素值为零的像素点的集合；

基于所述第一标记结果和所述第二标记结果，判断所述空洞区域集中各空洞区域内的各像素点是否属于同一彩色分割区域，获取第三标记结果；

其中，若所述空洞区域集中各空洞区域内的各像素点属于同一彩色分割区域，则对所述各像素点给予相同的标记；若所述空洞区域集中各空洞区域内的各像素点不属于同一彩色分割区域，则对所述各像素点分别给予不同的标记；

基于所述第三标记结果，获取待修复空洞区域集。

5.根据权利要求4所述的深度图修复方法，其特征在于，所述基于所述第三标记结果，获取待修复空洞区域集，包括：

基于所述第三标记结果和第一预设规则，对所述空洞区域集进行筛选，获取待修复空洞区域集；

其中，所述第一预设规则为：属于同一彩色分割区域的空洞区域的面积之和与所述彩色分割区域的面积的比例低于预设比例，并且面积大于预设面积阈值的空洞区域无须填充。

6.根据权利要求1所述的深度图修复方法，其特征在于，所述计算所述待修复空洞区域集中各空洞像素点的深度修复值，包括：

基于第二预设规则，对所述待修复空洞区域集中各待修复空洞区域内各空洞像素点进行优先级排序，基于所述各空洞像素点的优先级计算所述各空洞像素点的深度修复值；

其中，所述第二预设规则为：获取所述待修复空洞区域的最外层轮廓空洞像素点集，设为最高优先级；

将最外层轮廓空洞像素点集设为非空洞像素点集，获取此时待修复空洞区域的最外层轮廓空洞像素点集，设为次高优先级；

将获取到的最外层轮廓空洞像素点集循环设置为非空洞像素点集，提取此时待修复空洞区域的最外层轮廓点空洞像素点集，并设定相应的优先级，直到将所述待修复空洞区域内的所有空洞像素点全部检测完毕。

7.根据权利要求6所述的深度图修复方法，其特征在于，所述基于所述各空洞像素点的优先级计算所述各空洞像素点的深度修复值，包括：

基于所述各空洞像素点的优先级，从高到低逐级计算各空洞像素点搜索窗口内所有非空洞像素点的空间域权值和颜色域权值；

基于所述各空洞像素点搜索窗口内所有非空洞像素点的空间域权值和颜色域权值，对所述各空洞像素点搜索窗口内所有非空洞像素点的深度值进行加权求和，得到所述各洞像素点的深度修复值。