[发明专利]一种基于高清摄像头采集的小视频自动制作方法在审
申请号: | 202210347581.0 | 申请日: | 2022-04-01 |
公开(公告)号: | CN114897749A | 公开(公告)日: | 2022-08-12 |
发明(设计)人: | 刘必振;王文龙;李洪 | 申请(专利权)人: | 南京苏艾科软件技术有限公司 |
主分类号: | G06T5/50 | 分类号: | G06T5/50;G06V40/20;G06V40/16;G06V20/40;G06F16/11 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 210000 江苏省南京市建邺区扬*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 摄像头 采集 视频 自动 制作方法 | ||
1.一种基于高清摄像头采集的小视频自动制作方法,其特征在于,该方法具体包括如下步骤:
S1、视频采集
将多路高清摄像头视频采集并进行人行识别和视频存储;
S2、视频处理
将视频采集存储的视频进行处理,通过CUDA进行模型推理,推理的模型包括人脸识别、人行追踪、动作识别,找到希望剪辑的行为动作,以单人个体为主体进行视频剪辑记录;
S3、视频归档
将剪辑后的视频,按照主体进行归档,步骤S2中剪辑的视频片段根据识别到的人单元信息id进行归档,其中,人单元信息id是根据人脸识别推理信息和人行追踪推理信息综合确认的id,通过文件名命名携带id和动作行为的方式确认视频文件归属;
S4、视频后处理
根据归档的多个视频,采用视频自动选择算法和用户的设置对裁剪后的视频进行选取,获取指定数量的视频进行视频拼接,并附加视频衔接特效、视频内容渲染特效以及视频添加背景处理,最终生成一段单人行为短视频。
2.根据权利要求1所述的一种基于高清摄像头采集的小视频自动制作方法,其特征在于,在步骤S1中,所述多路高清摄像头采集方式包括网络接入或USB接入。
3.根据权利要求1所述的一种基于高清摄像头采集的小视频自动制作方法,其特征在于,在步骤S1中,视频采集具有对视屏的预处理,包括视频解码、人脸识别、视屏存储和信息置顶,具体步骤如下:
S11、视频处理器首先对视频流进行解码,初始化视频线程,初始化人脸识别模型;
S12、读取视频流帧,解码后每一定周期取一帧进行人脸识别;
S13、视频存储,对于步骤S12中所述帧无法识别到人的视频周期内每一帧进行丢弃操作,可识别到人的视频周期内每一帧进行存储操作;
S14、当步骤S13中的帧保存到一定数量时,对存储在内存中的帧进行视频写文件操作。
4.根据权利要求1所述的一种基于高清摄像头采集的小视频自动制作方法,其特征在于,在步骤S2中,视频处理包括人脸识别、行为识别、轨迹追踪和视频裁剪,视频处理模块根据输入的视频源确认个人单元并判断出视频中的动作行为,最终基于个人单元裁剪该单元的动作行为视频作为模块输出,其具体步骤如下:
S21、初始化视频处理模块:模块启动后先初始化推理模型并使用CUDA进行加载,推理的模型包括人脸识别、人行追踪、行为动作识别;
S22、读取视频文件:在初始化完成后,模块持续循环读取视频采集模块的存储空间;
S23、存取储视频帧缓存:当读到视频文件中的视频文件后,会逐帧解码到内存;
S24、动作行为推理:每存满一定时间的帧数后,将缓存帧输入动作行为推理模型,通过CUDA进行模型推理,根据识别结果丢弃未识别出动作的视频缓存帧,识别出动作行为的缓存帧会进行逐帧的进行下一步模型推理;
S25、个人单元确认:对于识别出动作行为的缓存帧,会进行双线程模拟推理,包括人行跟踪推理模型以及取出第一帧进行人脸识别模型推理,用于持续跟踪单个人对象的动作;
S26、视频裁剪:确认个人单元后,取出人行追踪的形体范围和指定裁剪大小进行比较,通过调整计算,将个人目标单元匹配到短视频大小中,视频最终裁剪到短视频的制作需要大小的像素;
S27、视频输出:当视频缓存帧数保存到一定时间时,会对保存的视频帧进行目标对象确认,对于已经识别到目标个人单元的视频缓存进行保存操作,未识别出个人单元的视频缓存进行丢弃操作。
5.根据权利要求4所述的一种基于高清摄像头采集的小视频自动制作方法,其特征在于,在步骤S25中,当目标对象单元脸部无法识别,由人形追踪确认目的单位,当目标对象短时间离开画面或被短暂遮挡,重回画面人形追踪判断为新个体时,由人脸检测确认目的单位并矫正,系统通过两个模型的结果共同保证裁剪的视频中的对象唯一性。
6.根据权利要求4所述的一种基于高清摄像头采集的小视频自动制作方法,其特征在于,所述视频处理模块可以同时处理多路视频源,在启动模块时根据输入源初始化进程池进行多进程视频处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京苏艾科软件技术有限公司,未经南京苏艾科软件技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210347581.0/1.html,转载请声明来源钻瓜专利网。