[发明专利]机器人过程自动化

摘要

包括在计算机存储介质上编码的计算机程序的方法、系统和装置，用于创建用于机器人自动化的用户界面控件图像。方法之一包括在训练过程期间检测控件选择事件；取回第一图像和第二图像；确定表示该第一图像和该第二图像之间的差异的差异图像；使用该差异图像，确定该差异图像中包括的像素的多种颜色，该像素可能位于该控件的控件位置之外；确定该差异图像中描绘的一个或多个形状，该一个或多个形状各自具有除了该多种颜色中的全部颜色之外的颜色；从该一个或多个形状中并使用该事件位置选择可能表示该控件的特定形状；以及存储从该两个或更多个图像之一提取的该控件的裁剪图像。