[发明专利]头戴式显示设备的摄像控制方法、装置及头戴式显示设备

说明书

本公开涉及一种头戴式显示设备的摄像控制方法、装置、头戴式显示设备及计算机可读存储介质，该头戴式显示设备包括用于摄取目标区域的三维图像的第一相机和用于摄取目标区域的二维图像的至少一个第二相机，第二相机根据目标区域中预设区域的图像自动调整自身的摄像参数；该方法包括：在确定第一相机摄取的三维图像中存在至少一个手势的情况下，根据至少一个手势在三维图像中的第一位置以及预设的第一相机和第二相机的相对位置参数，确定至少一个手势在第二相机拍摄的二维图像中对应的第二位置；在预设区域与至少部分第二位置对应的图像区域重叠的情况下，若重叠区域占预设区域比例大于或等于预设比例阈值，控制第二相机停止对摄像参数的自动调整。

技术领域

本公开实施例涉及虚拟现实技术领域，更具体地，涉及一种头戴式显示设备的摄像控制方法、装置、头戴式显示设备及计算机可读存储介质。

背景技术

头戴式显示设备(Head Mounted Display，HMD)是一种可以穿戴在用户头部的显示设备，能够实现虚拟现实(Virtual Reality，VR)、增强现实(Augmented Reality，AR)和混合现实(Mixed Reality，MR)等不同效果。

头戴式显示设备在使用时会使用户的头部或者眼睛会处于封闭环境，以使用户能够沉浸在虚拟环境中。而为了展示AR和MR中的现实内容，HMD上还会安装至少一个彩色相机，以便通过至少一个彩色相机摄取现实世界中的现实图像并将其投影至人眼，从而实现AR和MR的效果。

目前，彩色相机能够根据其摄取的感兴趣区域(region of interest，ROI)的图像来自动调整自身的摄像参数(例如对焦参数、曝光参数)，以此来摄取清晰的现实图像。实际情况中，用户在使用HMD时还会与当前看到的虚拟内容或现实内容进行频繁的手势交互，手势即用户通过灵活控制手指上的各关节做出的手的动作。在此情况下，用户的手势进入ROI后，彩色相机可能会以手势为对象来调整自身的摄像参数，导致彩色相机摄取的现实图像不清晰(例如以手势为对象调整自身的对焦参数，则无法对现实图像进行正确对焦)，影响彩色相机成像质量，导致AR和MR的实现效果较差。

发明内容

本公开实施例的一个目的是提供一种头戴式显示设备的摄像控制的新的技术方案。

根据本公开的第一方面，提供了一种头戴式显示设备的摄像控制方法，头戴式显示设备包括用于摄取目标区域的三维图像的第一相机和用于摄取目标区域的二维图像的至少一个第二相机，第二相机根据摄取的目标区域中预设区域的图像自动调整自身的摄像参数；该方法包括：获取第一相机在当前时间拍摄的三维图像；在根据三维图像确定目标区域中存在至少一个手势的情况下，根据至少一个手势在三维图像中的第一位置以及预设的第一相机和第二相机的相对位置参数，确定至少一个手势在至少一个第二相机在当前时间拍摄的二维图像中对应的第二位置；在预设区域与至少部分第二位置对应的图像区域重叠的情况下，获得重叠区域占预设区域的比例；在比例大于或等于预设比例阈值的情况下，控制第二相机停止对摄像参数的自动调整。

可选地，摄像参数包括以下一个或多个：对焦参数以及曝光参数。

可选地，预设比例阈值为0.2。

可选地，在根据三维图像确定所述目标区域中存在至少一个手势之前，该方法还包括：将三维图像输入预设的用于识别手势的手势分割模型；在手势分割模型输出至少一个手势的情况下，确定目标区域中存在至少一个手势。

可选地，相对位置参数包括：相对旋转参数和相对位移参数；根据至少一个手势在三维图像中的第一位置以及预设的第一相机和第二相机的相对位置参数，确定至少一个手势在至少一个第二相机在当前时间拍摄的二维图像中对应的第二位置，包括：根据相对旋转参数将第一位置对应的参数旋转对应的旋转角度，得到第一中间位置参数；根据相对位移参数对第一中间位置参数对应的位置进行平移，得到第二位置对应的参数；根据第二位置对应的参数确定手势在二维图像中对应的第二位置。