[发明专利]语音辅助方法、装置、终端设备以及存储介质在审
申请号: | 202211477449.8 | 申请日: | 2022-11-23 |
公开(公告)号: | CN115730054A | 公开(公告)日: | 2023-03-03 |
发明(设计)人: | 屈博 | 申请(专利权)人: | 西安歌尔泰克电子科技有限公司 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F16/33;G06F16/35 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 涂超群 |
地址: | 710076 陕西省西安市高新区天*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 辅助 方法 装置 终端设备 以及 存储 介质 | ||
本发明公开了一种语音辅助方法、装置、终端设备以及存储介质,通过响应于使用者的指令信息,启动指令信息对应的服务模式;若服务模式为盲道探测,则生成第一语音信息,用于引导使用者执行预设动作;在使用者执行预设动作时,通过摄像头采集图像数据,并基于探测模型对图像数据进行处理,得到行进方案,生成第二语音信息,用于引导使用者执行行进动作;在使用者执行行进动作时,获取使用者的运动状态信息及当前道路信息,基于运动状态信息及当前道路信息生成第三语音信息,用于为使用者提供道路指引。通过响应使用者的指令信息,引导使用者执行行进动作,实时生成语音信息,为使用者提供全面且及时的道路指引,从而实现指引盲人安全出行。
技术领域
本发明涉及智能穿戴设备领域,尤其涉及语音辅助方法、装置、终端设备以及存储介质。
背景技术
盲人是指视觉有障碍的人,盲人的活动会因视觉障碍受到限制。当盲人外出时,他们对于外界环境的观察,几乎完全靠自己身体的触碰,从而在出行上有严重安全隐患。随着社会的发展,城市建设在盲道上不断完善,如何指引盲人使用盲道出行便显得由为重要。
因此,有必要提出一种指引盲人安全出行的解决方案。
发明内容
本发明的主要目的在于提供一种语音辅助方法、装置、终端设备以及存储介质,旨在指引盲人安全出行。
为实现上述目的,本发明提供一种语音辅助方法,所述语音辅助方法包括:
响应于使用者的指令信息,启动所述指令信息对应的服务模式;
若所述服务模式为盲道探测,则生成第一语音信息,用于引导所述使用者执行预设动作;
在所述使用者执行预设动作时,通过摄像头采集图像数据,并基于预设的探测模型对所述图像数据进行处理,得到行进方案;
根据所述行进方案,生成第二语音信息,用于引导所述使用者执行行进动作;
在所述使用者执行行进动作时,获取所述使用者的运动状态信息及当前道路信息,基于所述运动状态信息及当前道路信息生成第三语音信息,用于为所述使用者提供道路指引。
可选地,所述服务模式还包括语音助手,所述响应于使用者的指令信息,启动所述指令信息对应的服务模式的步骤之后还包括:
若所述服务模式为语音助手,则通过麦克风采集所述使用者的语音声波;
将所述语音声波与系统数据库中的各功能声波进行匹配,得到所述语音声波对应的功能声波;
基于所述对应的功能声波产生对应的系统指令,并根据所述系统指令启动对应功能。
可选地,所述通过摄像头采集图像数据,并基于预设的探测模型对所述图像数据进行处理,得到行进方案的步骤之前还包括:
采集相关图像数据集;
对所述相关图像数据集中的盲道信息进行标记,得到探测模型数据库;
基于所述探测模型数据库建立所述探测模型。
可选地,所述通过摄像头采集图像数据,并基于预设的探测模型对所述图像数据进行处理,得到行进方案的步骤包括:
通过所述摄像头采集预设方向的图像数据;
基于所述探测模型对所述图像数据中的可疑盲道数据进行标记,得到标记数据;
基于所述探测模型数据库对所述标记数据进行识别,判断所述标记数据中是否包括特征数据;
若所述标记数据中包括所述特征数据,则通过所述探测模型中的方位算法计算盲道相对位置,其中,所述盲道相对位置包括盲道方位及盲道距离;
基于所述盲道相对位置生成所述行进方案。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安歌尔泰克电子科技有限公司,未经西安歌尔泰克电子科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211477449.8/2.html,转载请声明来源钻瓜专利网。