[发明专利]基于三维手部关键点和图像特征融合的手势特征提取方法

摘要

本发明提供了一种基于三维手部关键点和图像特征融合的手势特征提取方法，使用MediaPipe hands三维手部关键点提取网络从单一的RGB手势图片中回归出21个手部关键点的三维坐标，并根据这些坐标点构造手指弯曲角度特征以及手指交叉特征作为手势局部特征。同时根据图像分割算法辅以手部关键点的定位，得到二值化的手部图像，并计算图像的7个Hu不变矩，作为手势图像的全局特征。最后将手势的局部特征与全局特征进行融合，得到融合后的手势特征。应用本技术方案可得到一种更具表征意义的静态手势特征。