[发明专利]一种面向各类应用的软件机器人系统及其工作方法

说明书

本发明涉及一种面向各类应用的软件机器人系统及其工作方法，该系统通过对应用软件环境进行建模，然后采用深度强化学习方法设计和实现具有自我学习和决策能力的软件机器人，并提供人机交互接口。在学习完成后，根据用户下发的业务指令，软件机器人系统可以自动执行学习到的操作序列，以完成指定软件的指令任务。该系统可以应用到各类应用软件，能够简化用户的操作，使得用户在使用软件的某种功能时，无需关心具体的操作，只需要向系统下发指令，系统就能自动探索并生成最优操作序列，然后对软件进行操作完成对应的功能。

技术领域

本发明涉及一种面向各类应用的软件机器人系统及其工作方法，属于软件机器人系统技术领域。

背景技术

伴随着信息科技的飞速发展，机器人技术的研究和应用引起了各国的重视，逐渐成为国家建设的重点领域。近年来，伴随着人工智能、大数据、云计算等新兴技术的提出，机器人流程自动化(Robotic Process Automation)出现在人们的视野，英文缩写为RPA，有关机器人流程自动化的讨论和研究甚嚣尘上。国际知名信息调查机构Gartner在“2020年的十大战略技术趋势”报告中预测，机器人流程自动化(RPA)的兴起是未来人类社会实现超自动化(Hyper Automation)大趋势的重要部分，同时预计到2024年，通过将超自动化技术与重新设计的操作流程相结合，企业将降低30％的运营成本。

机器人流程自动化(RPA)是一种基于软件之上的自动化技术，这些工具可以像人那样在其他计算机系统的用户界面上操作。机器人流程自动化(RPA)是以机器人作为虚拟劳动力，模拟人在电脑上的不同系统之间操作行为，替代人在电脑前执行具有规律与重复性高的办公流程。大量繁琐但有规律的工作RPA都能胜任。

RPA的主要好处是降低成本，提高处理速度，减少错误并提高生产率。在实现方面，重要的是要考虑RPA不存储任何事务数据，并且不需要数据库。RPA机器人位于现有系统的顶部，并通过表示层访问这些平台。RPA软件机器人的目标是用“由外而内”的方式实现自动化来取代人。这不同于经典的“由内而外”的方法来改进信息系统。与传统的工作流技术不同，信息系统可以保持不变，不需要进行二次开发。

综上所述，在数字化时代，信息系统的角色日益从支持人类转变为替代人类。在信息时代的浪潮中，RPA软件机器人拥有广阔的前景以及巨大的经济价值。现有的RPA软件机器人大都是基于脚本对软件进行操作，这就需要人们事先熟悉完成某种功能所需要的一系列操作并编写脚本，对于功能众多复杂的软件来讲，这样的代价花销是巨大的。例如用户使用典型办公软件时，想要修改段落格式却不知道如何操作时，让其寻找对应脚本进行操作是不现实的。

发明内容

针对现有技术的不足，本发明提供了一种面向各类应用的软件机器人系统。

本发明还提供上述面向各类应用的软件机器人系统的工作方法，该系统通过对应用软件环境进行建模，然后采用深度强化学习方法设计和实现具有自我学习和决策能力的软件机器人，并提供人机交互接口。在学习完成后，根据用户下发的业务指令，软件机器人系统可以自动执行学习到的操作序列，以完成指定软件的指令任务。该系统可以应用到各类应用软件，能够简化用户的操作，使得用户在使用软件的某种功能时，无需关心具体的操作，只需要向系统下发指令，系统就能自动探索并生成最优操作序列，然后对软件进行操作完成对应的功能。

术语解释：

1.有限状态机：有限状态机是一种用来进行对象行为建模的工具，其作用主要是描述对象在它的生命周期内所经历的状态序列，以及如何响应来自外界的各种事件。在计算机科学中，有限状态机被广泛用于建模应用行为、硬件电路系统设计、软件工程，编译器、网络协议、和计算与语言的研究。

2.自然语言处理模型：NLP模型，即处理自然语言的模型，在本发明中自然语言处理模型的作用是将用户输入的自然语言指令映射到状态机中的一个状态。