[发明专利]一种屏幕内容识别处理方法、装置、终端和介质

说明书

技术领域

本发明涉及智能终端技术领域，尤其涉及一种屏幕内容识别处理方法、装置、终端和介质。

背景技术

本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。

随着移动通信技术的发展，移动终端的处理能力逐渐增强，允许在显示屏幕上显示网页图像或文档等信息。

目前，移动终端的屏幕一般采用支持触控技术的电阻屏和电容屏，以电容屏应用居多。现有的电容屏支持多点触控技术，可以让用户使用手指来控制终端屏幕的显示，如放大、缩小或移动等操作。多点触控技术是基于人机交互技术与硬件设备的结合而共同实现，其可以在没有传统输入设备(如：鼠标、键盘等)的情况下，通过触摸屏(屏幕、桌面或墙壁等)或触控板同时接受来自屏幕上多个点进行计算机的人机交互操作。用户可通过双手进行单点触摸，也可以以单击、双击、平移、按压、滚动以及旋转等不同手势触摸屏幕，从而使用户可以更好更全面地了解对象的相关特征(文字、录像、图片、卫片、三维模拟等信息)。

用户在浏览移动终端屏幕上的显示内容时，如果用户需要对正在浏览的部分内容进一步进行处理，例如，用户需要复制部分内容，或者用户需要分享部分内容，或者用户需要搜索部分内容等等，根据现有技术，用户往往需要经过一系列的操作才能实现，以用户需要复制屏幕显示的部分内容为例，用户需要执行以下操作：长按屏幕，触发移动终端弹出弹出“选择，全选”等选项，选择复制内容时，操纵左右选定轴框选所需内容，选定后弹出“复制”选项；至此，完成复制操作，如果用户需要进一步搜索相关内容，则需要退出当前应用程序，打开提供搜索服务的应用程序后，将复制的内容粘贴至搜索框中，点击开始搜索后，才能获得相关的搜索结果。

由此可见，现有的针对屏幕内容的处理操作流程比较复杂，导致用户操作繁琐，降低了用户体验。

发明内容

本发明实施例提供一种屏幕内容识别处理方法、装置、终端和介质，用以简化针对屏幕内容的处理操作流程，提高用户体验。

第一方面，提供一种屏幕内容识别处理方法，包括：

监控用户针对显示屏幕的触控操作；以及

如果确定监控到的触控操作为预设的屏幕内容识别触发操作，则确定待识别的屏幕内容所在的区域；

识别确定出的区域内所包含的屏幕内容类型；

根据所述屏幕内容类型提供相应的操作类型供用户选择。

可选地，在识别确定出的区域内所包含的屏幕内容类型之前，还包括：

对所在区域内包含的页面元素进行识别得到可编辑的页面元素；以及

以屏幕浮窗的形式显示得到的页面元素。

可选地，如果确定监控到的触控操作为预设的屏幕内容识别触发操作，则在确定待识别的屏幕内容所在区域之前，还包括：

提供区域选取框用于引导用户选择待识别的屏幕内容所在区域；以及

确定待识别的屏幕内容所在区域，包括：

确定用户利用所述区域选取框选择出的区域为待识别的屏幕内容所在区域。

可选地，所述屏幕内容识别触发操作包括用户针对显示屏幕的多点触控操作；以及

确定待识别的屏幕内容所在的区域，包括：

获取每一触点的触点坐标；

根据获取的多个触点坐标确定待识别的屏幕内容所在的区域。

可选地，所述多点触控操作包括两点触控操作；以及

根据获取的多个触点坐标确定待识别的屏幕内容所在的区域，包括：

以获取的两个触点坐标为对角线顶点坐标构造待识别的屏幕内容所在的矩形区域；或者

按照页面元素排列方式，以获取的两个触点坐标作为屏幕内容识别的起始点坐标和终止点坐标标记待识别的屏幕内容所在的区域。

可选地，在监控到用户针对显示屏幕的多点触控操作的同时，还包括：

启动计时器；

在获取每一触点的触点坐标之前，还包括：

确定所述计时器的计时时长达到预设阈值。

可选地，所述屏幕内容类型包括文字和图片；以及如果所述屏幕内容类型为文字，则提供的操作类型包括以下至少一项：复制操作、收藏操作、分享操作、翻译操作、编辑操作和文字搜索操作；如果所述屏幕内容类型为图片，则提供的操作类型包括以下至少一项：收藏操作、图片搜索操作、编辑操作和分享操作。

第二方面，提供一种屏幕内容识别处理装置，包括：

监控单元，用于监控用户针对显示屏幕的触控操作；