[发明专利]操作视频的处理方法、装置和计算机可读存储介质在审
申请号: | 202310160045.4 | 申请日: | 2023-02-23 |
公开(公告)号: | CN116310961A | 公开(公告)日: | 2023-06-23 |
发明(设计)人: | 请求不公布姓名 | 申请(专利权)人: | 上海微创医疗机器人(集团)股份有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/764;G06V10/82;G06V10/80;G06T7/00;G06T7/254 |
代理公司: | 北京三友知识产权代理有限公司 11127 | 代理人: | 童磊 |
地址: | 201203 上海市浦东新区中国(上*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 操作 视频 处理 方法 装置 计算机 可读 存储 介质 | ||
本说明书提供了操作视频的处理方法、装置和计算机可读存储介质。基于该方法,在获取包含有目标操作的执行过程的目标操作视频之后,可以先通过利用目标检测模型检测目标操作视频中目标操作器械,并进行标记,得到对应的中间数据组;其中,该中间数据组包含有目标操作视频中的多帧视频图像;上述视频图像还携带有至少包括在该视频图像中所检测到的目标操作器械的器械类别和位置信息的标记数据;再通过利用目标追踪模型处理中间数据组,以对所检测到的目标操作器械在目标操作的执行过程的具体使用情况进行追踪分析。从而可以高效地获取得到精度较高的目标操作器械的使用信息,以准确地对目标操作的执行过程中目标操作器械的使用情况进行质量评价。
技术领域
本说明书属于视频数据处理技术领域,尤其涉及操作视频的处理方法、装置和计算机可读存储介质。
背景技术
在许多应用场景中,工作人员常常需要使用相应的操作器械来执行具体的业务操作。例如,在流水线生产场景中,工作人员需要使用热熔枪、螺丝刀等器械完成具体的生产操作。
当需要对工作人员使用操作器械执行具体操作时的熟练度、规范性等进行质量评价时,基于现有方法,大多需要依赖技术人员通过对拍摄有工作人员使用操作器械执行业务操作的操作视频进行人工甄别、分析,以对该工作人员关于该操作器械的使用情况进行评价。
但是,上述方法具体实施时,往往存在评价过程繁琐、复杂,处理效率较低;且在对工作人员关于操作器械的使用情况进行甄别、分析时,很容易受到人为主观因素的影响,导致准确度相对较差等技术问题。
针对上述技术问题,目前尚未提出有效的解决方案。
发明内容
本说明书提供了一种操作视频的处理方法、装置和计算机可读存储介质,能够通过处理相应的目标操作视频,高效地获取得到精度较高的目标操作器械的使用信息,进而能够基于上述目标操作器械的使用信息,准确地对目标操作的执行过程中目标操作器械的使用情况进行质量评价,有效地减少了数据误差。
本说明书提供了一种操作视频的处理方法,包括:获取目标操作视频;其中,所述目标操作视频包含有目标操作的执行过程;通过利用目标检测模型处理目标操作视频,得到中间数据组;其中,所述中间数据组包含有目标操作视频中的多帧视频图像;所述视频图像携带有标记数据;所述标记数据至少包括在该视频图像中所检测到的目标操作器械的器械类别和位置信息;通过利用目标追踪模型处理所述中间数据组,获取目标操作的执行过程中目标操作器械的使用信息。
本说明书还提供了一种操作视频的处理装置,包括:获取模块,用于获取目标操作视频;其中,所述目标操作视频包含有目标操作的执行过程;第一处理模块,用于通过利用目标检测模型处理目标操作视频,得到中间数据组;其中,所述中间数据组包含有目标操作视频中的多帧视频图像;所述视频图像携带有标记数据;所述标记数据至少包括在该视频图像中所检测到的目标操作器械的器械类别和位置信息;第二处理模块,用于通过利用目标追踪模型处理所述中间数据组,获取目标操作的执行过程中目标操作器械的使用信息。
本说明书还提供了一种计算机可读存储介质,其上存储有计算机指令,所述指令被执行时实现以下步骤:获取目标操作视频;其中,所述目标操作视频包含有目标操作的执行过程;通过利用目标检测模型处理目标操作视频,得到中间数据组;其中,所述中间数据组包含有目标操作视频中的多帧视频图像;所述视频图像携带有标记数据;所述标记数据至少包括在该视频图像中所检测到的目标操作器械的器械类别和位置信息;通过利用目标追踪模型处理所述中间数据组,获取目标操作的执行过程中目标操作器械的使用信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海微创医疗机器人(集团)股份有限公司,未经上海微创医疗机器人(集团)股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310160045.4/2.html,转载请声明来源钻瓜专利网。