[发明专利]一种图像处理方法、装置及系统

说明书

本申请实施例公开了一种图像处理方法、装置及系统，可以应用于远程协同(例如在线辅导、远程购物等)场景，该方法可以由显示设备执行，还可以由显示设备的部件(例如处理器、芯片或芯片系统等)执行，该方法包括：第一显示设备获取第一图像、第二图像以及第一标记信息，第一标记信息来自第二显示设备；确定第一图像与第二图像的映射关系；基于该映射关系变换第一标记信息，以得到第二标记信息；第一显示设备同时显示第二图像与第二标记信息。通过利用第一图像与第二图像的映射关系，实现第一标记信息到第二标记信息的转化，使得图像的标记信息可以跟随图像同步变化，为用户提供更好的远程互动体验。

技术领域

本申请涉及计算机视觉领域，尤其涉及一种图像处理方法、装置及系统。

背景技术

人工智能(artificial intelligence，AI)是利用数字计算机或者数字计算机控制 的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、 方法、技术及应用系统。换句话说，人工智能是计算机科学的一个分支，它企图了解智能 的实质，并生产出一种新的能以人类智能相似的方式作出反应的智能机器。人工智能也就 是研究各种智能机器的设计原理与实现方法，使机器具有感知、推理与决策的功能。人工 智能技术正在向各行各业渗透，在金融、营销、安防等领域表现较优。

目前，远程协同场景的应用越来越广泛，例如：教育中的在线化教学、医疗中的远程 急救、远程协同购物、远程协同维修设备等。在远程协同场景中，往往涉及两端用户的互动，一端的用户A可以在远程画面上进行标记并将标记发送到另一端，使得另一端的用户 B可以更好地理解用户A的意图。但是，一旦远程画面的内容发生了变化，标记可能和远 程画面的内容不再匹配，影响用户体验。

如何在远程协同场景中的为用户提供更好的互动体验是亟待解决的问题。

发明内容

本申请实施例提供了一种图像处理方法，实现第一图像的标记信息可以根据第一图像 的变化进行变化，从而为用户提供更好的远程互动体验。

本申请第一方面提供了一种图像处理方法，可以应用于远程协同(例如在线辅导、远 程购物等)场景，该方法可以由第一显示设备执行，还可以由第一显示设备的部件(例如处理器、芯片或芯片系统等)执行，该方法包括：第一显示设备获取第一图像、第二图像 以及第一标记信息，至少一部分所述第一标记信息的内容来自第二显示设备；所述第一显 示设备同时显示所述第一图像和所述第一标记信息；所述第一显示设备确定所述第二图像对应的映射关系，所述第二图像对应的映射关系可以将所述第一图像映射到所述第二图像；所述第一显示设备基于所述第二图像对应的映射关系，将所述第一标记信息映射到第二标记信息；所述第一显示设备同时显示所述第二图像和所述第二标记信息；所述第一显示设备向所述第二显示设备发送所述第二图像对应的映射关系和/或所述第二标记信息。

本申请中，通过利用第一图像与第二图像的映射关系，实现第一标记信息到第二标记 信息的转化，使得第一图像的标记信息可以根据第一图像的变化进行变化，即使得第一图 像变化后的第二图像对应的第二标记信息与第二图像的内容匹配，避免了在远程协同过程 中图像内容变化时对应的标记与图像内容错位的情况，从而为用户提供更好的远程协同体 验。

可选地，在第一方面的一种可能的实现方式中，上述方法还包括：所述第一显示设备 确定所述第二图像相对于相邻帧发生运动，所述相邻帧是在所述第二图像之前采集的，且 与所述第二图像间隔三帧以内的图像。

该种可能的实现方式中，根据第二图像与前面间隔较近的帧来判断第二图像是否发生 运动，比直接根据第二图像与其上一帧图像来判断要更加准确，因为在图像采集帧率较高 时，紧邻的两帧之间的相对运动幅度可能较小，不容易发现。