[发明专利]一种基于外挂透明显示屏的标准工作流程引导方法及装置在审
申请号: | 202111638301.3 | 申请日: | 2021-12-29 |
公开(公告)号: | CN114385291A | 公开(公告)日: | 2022-04-22 |
发明(设计)人: | 蔡阔;郑孔迪 | 申请(专利权)人: | 南京财经大学 |
主分类号: | G06F9/451 | 分类号: | G06F9/451;G06F3/14;G06F3/16 |
代理公司: | 北京百年育人知识产权代理有限公司 11968 | 代理人: | 张鹭丝 |
地址: | 210023 江苏省*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 外挂 透明 显示屏 标准 工作 流程 引导 方法 装置 | ||
1.一种基于外挂透明显示屏的标准工作流程引导方法,其特征在于,具体包括如下步骤:
引导通信端接收到用户触发的引导请求信息,引导端内部通信单元将信息发送给内部处理单元;
所述处理单元对请求信息进行预处理,提取有效特征信息,并将提取到的有效信息发送给内部控制单元;
所述控制单元根据提取的指令信息生成对应标准子工作项,引导端通过内部显示单元执行对应子工作项的图像,进行操作引导。
2.根据权利要求1所述的一种基于外挂透明显示屏的标准工作流程引导方法,其特征在于,所述通信端将请求信息发送至内部处理单元时对请求信息进行了预处理操作,所述预处理步骤包括:
所述请求信息包括图像信息,音频信息和字符指令信息,对接收的引导请求信息进行分区分类;
对其中分类的字符指令信息单元直接发送引导端内部控制单元,而图像信息和音频信息则发送给引导端内部处理单元。
3.根据权利要求1所述的一种基于外挂透明显示屏的标准工作流程引导方法,其特征在于,所述引导端处理单元内部还包括:
图像语音训练模型,对采集输入的图像进行识别记录操作,对以往识别记录生成惯性导引库,确定后续图像和语音的实时变化;
有效特征信息提取,对采集输入的图像语音中具有明显特征的音调的信息进行获取,结合前后图像语音信息,得到最终有效信息。
4.根据权利要求1所述的一种基于外挂透明显示屏的标准工作流程引导方法,其特征在于,通过所述控制单元根据提取的指令信息生成对应标准子工作项后还包括:
根据所述有效信息提取生成的引导指令信息进行记录,加入图像语音导引训练模型;
所述标准子工作项指对应标准流程工作项的下属项,根据提取的的错误操作信息,不同错误步骤下的引导子工作项不同。
5.根据权利要求1所述的一种基于外挂透明显示屏的标准工作流程引导方法,其特征在于,所述引导端通过内部显示单元执行对应子工作项的图像,其中引导操作还包括;
通过串行连接的外设音频输出设备,对错误操作进行语音引导;
所述显示单元通过控制透明显示屏配合外设音频输出设备对错误操作进行图像语音结合引导。
6.如权利要求1至5所述的任一所述的一种基于外挂透明显示屏的标准工作流程引导方法,其特征在于,所述标准工作流程引导方法还包括:
所述引导端接收到来自工作端的引导信息时,引导端提供引导画面和语音以供用户进行所述画面的引导操作;
所述服务端记录所述引导端演示的引导画面以及引导端接收到的来自工作端的引导请求信息,生成操作记录;
所述服务端对引导操作记录进行处理分析,并生成和构建图像语音识别模型,提供常见的特征图像和语音对识别模型进行训练。
7.一种基于外挂透明显示屏的标准工作流程引导装置,其特征在于,所述引导装置包括:
信号收发模块,用于实时检测工作端用户触发的引导指令信息,并将采集到的图像或语音指令信息第一时间发送至引导端,通过串行外设音频设备向外传递引导语音指令,同时将收集的请求信息和对应引导操作画面传递至服务端;
控制处理模块,将采集得到的请求指令信息进行处理分析,并生成对应控制指令,发送至显示单元;
显示引导模块,接收来自控制处理单元的请求指令,所述显示引导模块根据所述指令执行相应的引导操作画面。
8.根据权利要求7所述的一种基于外挂透明显示屏的标准工作流程引导装置,其特征在于,所述信号收发模块包括图像输入单元、音频输入单元和音频输出单元:
图像输入单元,用于工作端用户进行工作时错误操作的抓拍和用户寻求标准操作时手势指令图像的截取;
音频输入单元,用于工作端用户寻求标准操作语音信息的收集;
音频输出单元,用于引导端装置输出标准工作流程时的语音。
9.根据权利要求7所述的一种基于外挂透明显示屏的标准工作流程引导装置,其特征在于,所述显示引导模块包括引导单元、确定单元和显示单元:
引导单元,用于引导和记录生成的所述图像语音引导训练模型;
确定单元,用于确定调取的引导子工作项操作画面的正确性;
显示单元,用于显示引导的正确子工作项的对应操作画面。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京财经大学,未经南京财经大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111638301.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种业务处理系统及业务处理方法
- 下一篇:机车牵引电传动系统及其控制方法