[发明专利]设备操控方法、系统、计算机设备及存储介质

说明书

本方案涉及一种设备操控方法。所述方法包括：采集语音指令，并识别语音指令生成语音文本；基于人工智能的文本分类技术，对语音文本进行分类，得到分类结果；查找与分类结果对应的操作指令，并展示与操作指令对应的操作界面；获取并识别手势指令，并根据手势指令、操作界面操控设备。通过语音指令、手势指令结合来操控设备，可以提高设备操作的准确率；由于语音指令和手势指令相结合，可以提高人机交互的自然性，降低非专业或不熟练用户的误操作，以及通过人工智能和机器学习的技术，更好地让系统服务于用户操作与生产应用；同时，降低学习和操作难度，保障操作的准确度。

技术领域

本发明涉及计算机技术领域，特别是涉及一种设备操控方法、系统、计算机设备及存储介质。

背景技术

随着计算机技术的发展，操作命令也越来越多，功能也越来越强。随着模式识别，如语音识别、汉字识别等输入设备的发展，操作员和计算机在类似于自然语言或受限制的自然语言这一级上进行交互成为可能。人机交互是指人与计算机之间使用某种对话语言，以一定的交互方式，为完成确定任务的人与计算机之间的信息交换过程。传统的设备操控方式是通过键盘和鼠标，基于命令行或者图形界面，对于专用的工业硬件或者软件进行操作与交互。由于命令行或者图形界面的人机交互操作，不符合人类语言交互的自然性，并且对于操作命令以及图形界面菜单的学习与掌握要求较高；对于非经过专业以及非熟练掌握功能的用户不够友好，甚至会由于操作错误，对于系统生产带来损害。

因此，传统的设备操控方法经常出现用户操作错误，存在设备操作的准确率较低的问题。

发明内容

基于此，为了解决上述技术问题，提供一种设备操控方法、系统、计算机设备和存储介质，可以提高设备操作的准确率。

一种设备操控方法，所述方法包括：

采集语音指令，并识别所述语音指令生成语音文本；

基于人工智能的文本分类技术，对所述语音文本进行分类，得到分类结果；

查找与所述分类结果对应的操作指令，并展示与所述操作指令对应的操作界面；

获取并识别手势指令，并根据所述手势指令、所述操作界面操控设备。

在其中一个实施例中，所述查找与所述分类结果对应的操作指令，包括：

根据所述分类结果获取用户意图；

查找与所述用户意图对应的对应关系；所述对应关系用于表示所述用户意图与所述操作指令之间的关系；

根据所述对应关系查找所述操作指令。

在其中一个实施例中，所述方法还包括：

获取登录指令，并根据所述登录指令获取用户信息；

查找与所述用户信息对应的用户历史信息，并对所述用户历史信息进行大数据分析，得到分析结果；

展示与所述分析结果对应的操作界面。

在其中一个实施例中，所述识别所述语音指令生成语音文本，包括：

将所述语音指令发送至本地服务器，并将所述语音指令发送至云端；

接收所述本地服务器返回的第一语音识别结果，并接收所述云端返回的第二语音识别结果；

根据所述第一语音识别结果、所述第二语音识别结果生成所述语音文本。

在其中一个实施例中，所述方法还包括：

所述本地服务器获取文字识别神经网络模型，并通过所述文字识别神经网络模型输出所述第一语音识别结果；

所述云端获取所述文字识别神经网络模型，并通过所述文字识别神经网络模型输出所述第二语音识别结果。