[发明专利]图像处理方法、显示设备和检查系统

说明书

确定将三维网格变换为二维全景坐标的系数，该三维网格近似三维模型的至少一部分，该三维模型包括目标对象的至少一部分并且从多个二维图像生成。根据第一图像，指定从与二维全景坐标的一部分对应的多个二维图像确定的第一图像上的第一位置、以及要投影到二维全景坐标上的注释。确定与该注释到二维全景坐标上的投影对应的第二位置。将注释叠加在通过将第一图像投影到二维全景坐标上而获得的第二图像上。确定与第一位置到第三图像上的投影对应的第三位置，并且将注释投影并叠加在第三图像上的第三位置处。

技术领域

本发明涉及图像处理方法、显示设备和检查系统。

背景技术

当检查比人类大得多的三维对象(诸如建筑物结构)时，需要使用遥控机器人等拍摄检查对象的特写照片，并且需要由地面上的检查员使用拍摄到的、已对其执行了定位的图像进行检查工作。相应地，已知一种技术，该技术使用多个拍摄到的图像来创建三维模型，并且与三维模型和拍摄到的图像相关联地存储并显示用户输入的注释。

在专利文献1中，公开了一种技术，其中，用户在二维图像上选择的对象(例如，边界框)和用户输入的内容(例如，注释)被投影在三维模型上，并且这些对象和内容被反映在通过拍摄相同的三维位置而获得的其他二维图像中并被显示在其上。根据专利文献1，用户在观看二维图像时能够在从多个图像创建的三维模型中创建三维对象的注释。

发明内容

[技术问题]

然而，在传统技术中使用三维模型创建注释的方法中，需要从各个方向浏览三维模型以便理解整个图像，因此存在一个问题在于一览性(perspicuity)低。即使专利文献1也没有消除一览性低的问题。

本发明是有鉴于上述问题而完成的，并且其目的在于能够容易地观看与三维模型上指定的位置相关联的信息。

[问题的解决方案]

根据本发明的一个方面，一种图像处理方法包括：从多个二维图像生成包含目标对象的至少一部分的三维模型；通过三维网格近似该三维模型的至少一部分；确定将该三维网格变换为二维全景坐标的系数；从与该二维全景坐标的一部分对应的多个二维图像中确定第一图像；根据该第一图像，指定要投影到该二维全景坐标上的内容和该第一图像上的第一位置；确定与该内容到该二维全景坐标上的投影对应的第二位置；将该第二位置和该内容彼此相关联地存储；将该内容作为注释叠加在通过将该第一图像投影到该二维全景坐标上而获得的第二图像上；从多个二维图像确定第三图像；确定与该第一位置到该第三图像上的投影对应的第三位置；以及将该内容投影在该第三图像上的该第三位置处，以叠加该内容作为注释。

[发明的有益效果]

本发明的效果在于，可以容易地观看与在三维模型上指定的位置相关联的信息。

附图说明

图1A是用于示意性地说明由根据第一实施例的图像处理装置执行的图像处理的视图。

图1B是用于示意性地说明图像处理的视图。

图1C是用于示意性地说明图像处理的视图。

图1D是用于示意性地说明图像处理的视图。

图2是用于更详细地说明第一实施例中的注释的生成方法的视图。

图3是用于更详细地说明第一实施例中的注释的生成方法的视图。

图4A是用于更详细地说明第一实施例中的注释的生成方法的视图。

图4B是用于说明生成方法的视图。

图5是示出可应用于第一实施例的图像处理装置的硬件配置的示例的框图。

图6A是用于说明第一实施例中的图像处理装置的功能的一个示例的功能框图。