[发明专利]视频处理方法、装置、可读介质及电子设备在审
| 申请号: | 202210398270.7 | 申请日: | 2022-04-15 |
| 公开(公告)号: | CN114760494A | 公开(公告)日: | 2022-07-15 |
| 发明(设计)人: | 李嘉桐;白刚 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
| 主分类号: | H04N21/233 | 分类号: | H04N21/233;H04N21/2343;H04N21/439;H04N21/4402;H04N21/845;G10H1/00;G06V20/40;G06V40/16;G06F16/75;G06F16/78;G06F16/783 |
| 代理公司: | 北京英创嘉友知识产权代理事务所(普通合伙) 11447 | 代理人: | 贺晓蕾 |
| 地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 视频 处理 方法 装置 可读 介质 电子设备 | ||
1.一种视频处理方法,其特征在于,所述方法包括:
获取包含预设对象的待处理视频;
从所述待处理视频中提取目标音频;
确定所述目标音频对应的音频节奏信息;
根据所述音频节奏信息,从所述待处理视频中提取包括所述预设对象的目标视频片段。
2.根据权利要求1所述的方法,其特征在于,所述根据所述音频节奏信息,从所述待处理视频中提取包括所述预设对象的目标视频片段包括:
根据所述音频节奏信息,确定特征时间信息;
基于所述特征时间信息,从所述待处理视频中提取包括所述预设对象的所述目标视频片段。
3.根据权利要求2所述的方法,其特征在于,所述音频节奏信息包括所述目标音频中不同时间点对应的音频节奏密度,所述音频节奏密度用于表征所述目标音频的音频节奏的变化速度;所述根据所述音频节奏信息,确定特征时间信息包括:
确定所述目标音频中音频节奏密度大于或等于预设密度阈值的目标时间点,并将所述目标时间点作为所述特征时间信息。
4.根据权利要求2所述的方法,其特征在于,所述基于所述特征时间信息,从所述待处理视频中提取包括所述预设对象的所述目标视频片段包括:
提取所述待处理视频中的目标图像;
根据所述目标音频和所述目标图像,确定所述待处理视频中的至少一个目标对象和每个所述目标对象对应的目标对象时间信息;所述目标对象为在所述待处理视频中讲话的对象;
根据所述特征时间信息和多个所述目标对象时间信息,确定目标时间信息;
根据所述目标时间信息,从所述待处理视频中提取包括所述预设对象的所述目标视频片段。
5.根据权利要求4所述的方法,其特征在于,所述根据所述目标音频和所述目标图像,确定所述待处理视频中的至少一个目标对象和每个所述目标对象对应的目标对象时间信息包括:
确定所述目标音频中的至少一个第一对象;
确定所述目标图像中的至少一个第二对象;
根据至少一个所述第一对象和至少一个所述第二对象,确定至少一个所述目标对象;
根据所述目标图像,确定每个所述目标对象对应的目标对象时间信息。
6.根据权利要求4所述的方法,其特征在于,所述根据所述特征时间信息和多个所述目标对象时间信息,确定目标时间信息包括:
将多个所述目标对象时间信息中距离所述特征时间信息最近的目标对象时间信息,作为所述目标时间信息。
7.根据权利要求4所述的方法,其特征在于,在所述根据所述目标时间信息,从所述待处理视频中提取包括所述预设对象的所述目标视频片段前,所述方法还包括:
将所述目标图像输入预先训练的转场帧确定模型,以获取所述转场帧确定模型输出的至少一个转场帧;
所述根据所述目标时间信息,从所述待处理视频中提取包括所述预设对象的所述目标视频片段包括:
从至少一个所述转场帧中确定距离所述目标时间信息最近的目标转场帧;
根据所述目标转场帧,从所述待处理视频中提取包括所述预设对象的所述目标视频片段。
8.根据权利要求2所述的方法,其特征在于,在所述基于所述特征时间信息,从所述待处理视频中提取包括所述预设对象的所述目标视频片段前,所述方法还包括:
获取所述待处理视频对应的至少一个预设关键词;
确定每个所述预设关键词在所述待处理视频中的关键词时间信息;
所述基于所述特征时间信息,从所述待处理视频中提取包括所述预设对象的所述目标视频片段包括:
根据所述特征时间信息和所述关键词时间信息,确定目标特征时间信息;
根据所述目标特征时间信息,从所述待处理视频中提取包括所述预设对象的所述目标视频片段。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210398270.7/1.html,转载请声明来源钻瓜专利网。





