[发明专利]图像检测与渲染方法及装置、设备、存储介质

说明书

本申请实施例公开了一种图像检测与渲染方法、装置、设备及存储介质，所述方法包括：通过第一线程从图像序列中获取待检测帧图像；通过第二线程对所述待检测帧图像执行图像检测任务；其中，所述图像检测任务用于获得所述待检测帧图像的检测结果；通过所述第一线程从经过所述第二线程执行图像检测任务后的图像中确定待渲染帧图像，对所述待渲染帧图像执行图像渲染任务；其中，所述图像渲染任务用于基于所述待渲染帧图像的检测结果，对所述待渲染帧图像进行渲染，得到所述待渲染帧图像的特效画面。

技术领域

本申请涉及计算机视觉技术领域，涉及但不限定于图像检测与渲染方法及装置、设备、存储介质。

背景技术

随着摄像技术的普及和应用，利用设备进行图像拍摄或视频拍摄已经成为人们日常生活中用来记录生活的重要手段之一。为了呈现的视觉效果更加丰富多彩，往往都需要在图像检测的基础上再做特效渲染，将最终渲染后的图像再呈现给用户。

相关技术中由于前端（Web）的Java描述语言（JavaScript，JS）单线程工作机制，基于深度学习的图像检测和特效渲染按序进行，导致单帧时间过长，预览时较为卡顿，不能满足用户体验的帧率指标。

发明内容

本申请实施例提供一种图像检测与渲染方法及装置、设备、存储介质。

本申请实施例的技术方案是这样实现的：

第一方面，本申请实施例提供一种图像检测与渲染方法，所述方法包括：

通过第一线程从图像序列中获取待检测帧图像；

通过第二线程对所述待检测帧图像执行图像检测任务；其中，所述图像检测任务用于获得所述待检测帧图像的检测结果；

通过所述第一线程从经过所述第二线程执行图像检测任务后的图像中确定待渲染帧图像，对所述待渲染帧图像执行图像渲染任务；其中，所述图像渲染任务用于基于所述待渲染帧图像的检测结果，对所述待渲染帧图像进行渲染，得到所述待渲染帧图像的特效画面。

在一些可能的实施例中，按照所述图像序列中图像的先后顺序，在针对所述图像序列中当前帧图像执行完所述步骤后，再按照所述步骤执行下一帧图像；其中，所述待检测帧图像和待渲染帧图像均为所述当前帧图像。

这样，对第一线程实时获取的当前帧图像，先通过第二线程执行图像检测任务，得到检测结果，再由第一线程基于检测结果执行当前帧图像的图像渲染任务，如此使得检测过程不再占用第一线程的性能，可以提高显示帧率及体验效果。

在一些可能的实施例中，所述通过第二线程对所述待检测帧图像执行图像检测任务，包括：在所述第一线程从所述图像序列中获取当前帧图像作为所述待检测帧图像的过程中，通过所述第二线程对所述当前帧图像的前一帧图像执行所述图像检测任务；所述通过所述第一线程从经过所述第二线程执行图像检测任务后的图像中确定待渲染帧图像，对所述待渲染帧图像执行图像渲染任务，包括：在所述第二线程对所述当前帧图像执行所述图像检测任务的过程中，通过所述第一线程将经过所述图像检测任务后的前一帧图像作为所述待渲染帧图像，对所述待渲染帧图像执行所述图像渲染任务。

这样，对第一线程获取的前一帧图像，在通过第二线程执行图像检测任务的同时由第一线程获取当前帧图像，然后在第一线程基于检测结果对前一帧图像进行渲染的同时由第二线程执行当前帧图像的检测过程，如此利用通过插帧交替进行图像检测和图像渲染，第一线程和第二线程可以同时执行各自任务，节省等待时间，可以提高显示帧率及体验效果。