[发明专利]手语转译的方法、装置、计算机设备及存储介质

说明书

本申请涉及人工智能技术领域，特别是涉及到一种手语转译的方法、装置、计算机设备及存储介质，所述方法包括如下步骤：获取手语手势的图像数据；对所述图像数据切片处理，得到所述图像数据中的关键帧；将所述关键帧与标准手语手势关键帧进行比对，确定所述手语手势的词义；基于字符串拼接技术将所述词义进行连接，得到所述手语手势的句意信息；通过预设通道向对应用户播放所述句意信息。本申请基于对手语转译，解决与听障人士交流障碍的问题。

技术领域

本申请涉及到人工智能技术领域，特别是涉及到一种手语转译的方法、装置、计算机设备及存储介质。

背景技术

手语是用手势比量动作，根据手势的变化模拟形象或者音节以构成的一定意思或词语，它是听力障碍还有无法言语的人互相交际和交流思想的一种手的语言，对于听力障碍的人而言，它是主要的交际工具。但是由于手语在非听障人士中普及度不高，导致非听障人士与听障人士间的高效沟通存在障碍。目前，与听障人士高效交流是需要解决的问题。

发明内容

本申请的主要目的为提供一种手语转译的交互方法、装置、计算机设备及存储介质，旨在解决如何提高与听障人士间的交流效率的技术问题。

为了实现上述发明目的，本申请提出一种手语转译的方法，包括：

获取手语手势的图像数据；

对所述图像数据切片处理，得到所述图像数据中的关键帧；

将所述关键帧与标准手语手势关键帧进行比对，确定所述手语手势的词义；

基于字符串拼接技术将所述词义进行连接，得到所述手语手势的句意信息；

通过预设通道向对应用户播放所述句意信息。

进一步地，所述对所述图像数据切片处理，得到所述图像数据中的关键帧，包括：

对所述图像数据进行预处理，得到预处理图像数据；

对所述预处理图像数据切片处理，得到所述图像数据中的关键帧。

进一步地，所述将所述关键帧与标准手语手势关键帧进行比对，确定所述手语手势的词义，包括：

读取标准手语手势关键帧；

将所述关键帧与所述标准手语手势关键帧进行比对，得到与所述关键帧相似度最高的标准手语手势关键帧；

根据与所述关键帧相似度最高的标准手语手势关键帧的词义信息确定所述手语手势的词义。

进一步地，所述字符串拼接技术将所述词义进行连接，得到所述手语手势的句意信息，包括：

将所述词义按照所述手语手势先后顺序进行排序，得到具有连接顺序的词义信息；

基于字符串拼接技术将所述词义信息进行连接，得到所述手语手势的句意信息。

进一步地，所述通过预设通道向对应用户播放所述句意信息，包括：

根据所述句意信息生成语音播放信息，并通过预设音箱将所述语音播放信息播放至对应用户。

进一步地，所述根据所述句意信息生成语音播放信息，并通过预设音箱将所述语音播放信息播放至对应用户之后，还包括：

获取语音数据；

将所述语音数据转译为文本信息；

对所述文本信息进行处理，得到处理文本；

将所述处理文本与标准手语手势图像进行匹配，确定所述处理文本的目标手语手势图像；

基于图像拼接技术将所述目标手语手势图像按照所述语音数据的语义顺序进行连接，得到所述语音数据的标准手语手势图像信息；