[发明专利]基于网络实现的听障人士与正常人士无障碍沟通在线交流系统及方法在审
申请号: | 202110694216.2 | 申请日: | 2021-06-22 |
公开(公告)号: | CN113438300A | 公开(公告)日: | 2021-09-24 |
发明(设计)人: | 李川越;洪瑞;封心怡;芦星宇;杜婧 | 申请(专利权)人: | 江苏科技大学 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;H04L12/58;G10L15/26 |
代理公司: | 南京正联知识产权代理有限公司 32243 | 代理人: | 卢霞 |
地址: | 212003*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 网络 实现 人士 正常 障碍 沟通 在线 交流 系统 方法 | ||
1.基于网络实现的听障人士与正常人士无障碍沟通在线交流系统,其特征在于:包括无听障终端、听障终端和云端服务器,其中:
所述无听障终端, 用于通过网络将无听障的正常人士的语音、文字和视频的一种或者数种数据上传到云端服务器,并且通过网络接收来自于云端服务器处理后的听障人群的手语视频数据转化而来的文字和语音、视频的任意一种或者数种数据;
所述听障终端,用于将听障人群的手语进行摄像以及视频数据上传到云端服务器,并且通过网络接收在云端服务器处理后的正常人士的语音、文字、视频数据中的任意一种或者数种转换而来的手语视频;
所述云端服务器,用于存储以及管理手语相关的文字、图片、视频数据,将从网络接收到的语音转换成文字,由文字生成其对应的手语视频或由接收到的文字生成其对应的手语视频;
所述听障终端或云端服务器具有动作识别系统、手语动画生成系统、语音识别系统、手语数据库管理系统和手语数据库,而且:
所述手语数据库,用于存储手语的文字、图片、视频数据;
所述手语数据库管理系统,用于对手语数据库中的手语文字、图片、视频数据进行增加、删除、修改以及查询的管理操作;
所述动作识别系统,用于将听障终端或云端服务器接收到的手语视频转换为文字,并且通过网络传输到无听障终端;
所述语音识别系统,用于将语音转换为文字,并将转换成的文字传至本地的手语动画生成系统;
所述手语动画生成系统,用于由文字生成其对应的手语视频,并通过网络传输到听障人士。
2.根据权利要求1所述的在线交流系统,其特征在于:所述听障终端包括:
手语摄像头模块,用于以摄像模式获取听障人士的手语视频;
手语视频网络模块,用于将录制的手语视频传到云端服务器进行转化;
手语动画视频播放模块,用于将网络接收到的手语视频播放;
听障端聊天模块,用于通过聊天界面展示给听障人士。
3.根据权利要求2所述的在线交流系统,其特征在于:所述无听障终端包括如下模块:
正常端数据输入模块,用于将正常人士输入的语音、文字以及视频信息录入无听障终端;
正常端网络模块,用于将正常端数据输入模块输入的语音、文字及视频数据通过网络传输到云端服务器,以及用于接收听障终端上传的并且经由云端服务器转换而来的语音、文字及视频数据;
正常端显示模块,用于展示通过网络从听障终端接收到的语音、文字及视频数据。
4.根据权利要求3所述的在线交流系统,其特征在于:正常端网络模块和手语视频网络模块均为5G模块、4G模块、WIFI模块和蓝牙模块中的其中一种或者数种的结合。
5.根据权利要求2所述的在线交流系统,其特征在于:所述听障终端还具有文字输入模块,用于直接通过云端服务器与正常终端进行在线交流。
6.根据权利要求5所述的在线交流系统,其特征在于:所述听障终端还具有语音输入模块,供给听障人士周围的人临时以及紧急情况下输入使用。
7.根据权利要求5所述的在线交流系统,其特征在于:所述无听障终端与听障终端的数量均可分别为一个或者多个。
8.基于网络实现的听障人士与正常人士无障碍沟通在线交流方法,其特征在于:在权利要求1-7任意一项的在线交流系统上执行,无听障终端和听障终端通过网络模块和云端服务器进行在线面对面无障碍交流。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏科技大学,未经江苏科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110694216.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种尿素浓度快速检测方法及检测传感器和应用
- 下一篇:显示面板及其驱动方法