[发明专利]一种手指动作编码及其与汉语拼音的映射方法

说明书

本发明是一种手指动作编码及其与汉语拼音的映射方法，涉及编码技术。该方法针对手指动作，进行编码，再将这些编码与汉语拼音相对应，形成手指动作与汉语拼音之间的映射关系。利用编码和映射，可以将手指的动作，简单、精确地映射到对应的汉字语音，可用于构建低成本的聋哑人发声装置。

技术领域

本发明涉及编码技术领域，特别是涉及一种手指动作编码技术、以及其与汉语拼音的映射技术。

背景技术

手语是一种依靠动作和视觉交流的特殊语言，是聋哑人交流的工具。手语由双手的手型、位置、方向、面部表情、唇动、体势信息的组合构成，学习手语，提高聋哑人的生活学习和工作条件，正常人学习手语可以为聋哑人提供更好的服务。然而，中国手语包含3000多个常用的词汇，使得学习手语需要投入非常多的时间和巨大的努力，阻碍了正常人与聋哑人之间的正常交流。

随着计算机的普及使用，以及人工智能技术的发展，研究人员一直在努力实现手语与人类自然语言之间自动互译，手语识别是其中的重要研究方向。手语识别的目的就是通过计算机提供一种有效的、准确的机制，将手语翻译成文本或语音使得聋哑人和听力正常人之间的交流变得更加方便、快捷。

手语识别开始于90年代，从手语数据的采集设备来划分，主要包括基于数据手套的和基于视觉的两种系统。

基于视觉的手语识别系统受限于计算机视觉的技术能力，前端手形的检测非常困难，并且，识别受背景和光照影响非常大，因此，目前基于视觉的手语识别系统只能实现有限的手语识别。

数据手套结合运动传感器，可以容易地获得较精确的手语数据，已经可以实现大词汇量的手语识别，但数据手套成本非常高，严重限制了技术的推广应用。

发明内容

本发明的目的是公开一种手指动作编码及其与汉语拼音的映射方法，利用这种编码和映射方法，可以将手指的动作，简单、精确地映射到对应的汉字语音，基本可以省去手语识别过程，采用这种方法，可以用来构建低成本的聋哑人发声装置。

为达到上述目的，本发明的技术解决方案是：

手指动作编码及其与汉语拼音的映射方法，采用以下手指动作，构成手指动作编码：

大拇指的指尖或指节的一侧，与同一只手的其他四指的指尖、或指节的一侧接触，构成一个手指动作编码。

或采用以下手指动作，构成手指动作编码手指的指尖或指节的一侧，与同一只手的手掌接触，构成一个手指动作编码：

手指动作编码及其与汉语拼音的映射方法，通过以下方法，形成手指动作编码与汉语拼音声母或韵母之间的映射：

a)将一只手的一个手指动作编码与汉语拼音的声母对应，形成该手指动作与汉语拼音一个声母之间的映射关系，然后选择这只手其他不同的手指动作编码，分别于其他汉语拼音声母对应，最终形成这只手不同的手指动作编码与汉语拼音不同声母之间的一一映射。

b)将另一只手一个手指动作编码与汉语拼音的韵母对应，形成该手指动作与汉语拼音一个韵母之间的映射关系，然后选择这只手其他不同的手指动作编码，分别于其他汉语拼音韵母对应，最终形成这只手不同的手指动作编码与汉语拼音不同韵母之间的一一映射。

手指动作编码及其与汉语拼音的映射方法，通过以下方法，形成手指动作编码与汉语拼音之间的映射：

双手各自同时做出一个手指动作编码，分别对应汉语拼音的一个声母和一个韵母，对应的声母和韵母组合，构成一个汉字的汉语拼音。

采用以下手的动作，代表汉语拼音的声调：

一只手的手掌方向，分别代表汉语拼音声调的阴平、阳平、上声、去声和轻声五个声调。

或采用两只手的手掌方向的组合，分别代表汉语拼音声调的阴平、阳平、上声、去声和轻声五个声调。