[发明专利]一种基于改进胶囊网络与算法的手势图像分割与识别方法

摘要

本发明公开了一种基于改进胶囊网络与算法的手势图像分割与识别方法，属于计算机视觉与人工智能技术领域，在复杂背景下用提出的U形残差胶囊网络去掉背景，把手势图像分割出来，然后用图像处理的方法去除噪声并将其二值化图像的手势位置定位出来，第三，将定位出来的手势区域作为掩膜把原图的背景去掉，仅仅保留手势图像，最后将手势图像输入到改进的矩阵胶囊网络，采用改进算法进行识别。改进算法比U‑Net算法大大降低了参数量，提高了手势图像的分割性能，从而提高了手势图像的识别率。

主权项

1.一种基于改进胶囊网络与算法的手势图像分割与识别方法，其特征在于，所述方法包括如下步骤：步骤1：拍摄和收集复杂背景下的手势图像，对所有图像的手势轮廓进行人工标注并生成标签图，再将原图和标签图进行图像增强处理；步骤2：用经过图像增强后的图像对U型残差胶囊网络进行训练，把复杂背景下的手势图像输入训练好后的U型残差胶囊网络分割出二值化手势图像；步骤3：将步骤2中分割出来的二值化手势图像经过图像定位得到矩形包围框，把包围框所对应的原图和分割图相乘最终得到分割出来的手势图像；步骤4：利用不同手势形状的手势图像训练改进矩阵胶囊网络，输出训练好的改进矩阵胶囊网络模型，将步骤3分割出的手势图像输入改进矩阵胶囊网络模型，使用改进矩阵胶囊网络模型分类出每种不同的手势，实现手势图像的识别。