[发明专利]一种视频数据的处理方法和装置有效
申请号: | 201710114564.1 | 申请日: | 2017-02-28 |
公开(公告)号: | CN106878632B | 公开(公告)日: | 2020-07-10 |
发明(设计)人: | 张福;郑宇;唐庆茂;黄智丛;田军 | 申请(专利权)人: | 北京知慧教育科技有限公司 |
主分类号: | H04N5/268 | 分类号: | H04N5/268;H04N19/136;H04N19/179;H04N19/40;G06F40/30;G06F16/78 |
代理公司: | 北京信远达知识产权代理有限公司 11304 | 代理人: | 魏晓波 |
地址: | 100086 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 数据 处理 方法 装置 | ||
1.一种视频数据的处理方法,其特征在于,包括:
获取待处理的视频元数据;
根据预设的视频转码规则和视频转码参数,对所述视频元数据进行转码处理,获得视频转换信息;所述视频转换信息包括转码后的目标视频文件;
根据预设的提取参数,对所述目标视频文件进行图像采样获得采样图像集合信息,对所述目标视频文件进行音频数据提取、切分,获得音频片段集合信息;
对所述采样图像集合信息进行处理,获得图像文本信息和物品信息;
对所述音频片段集合信息进行处理,获得语音文本信息;
依据所述采样图像集合信息和所述图像文本信息,按照图像相似度计算方法,对所述采样图像集合信息进行聚类分组,获得多个视频场景;
根据所述多个视频场景、物品信息和语音文本信息,生成语义标签和上下文特征信息。
2.根据权利要求1所述的视频数据的处理方法,其特征在于,所述视频元数据包括:视频名称、用户标签和源文件。
3.根据权利要求1所述的视频数据的处理方法,其特征在于,预设的视频转码参数包括:视频解码和编码参数、音频解码和编码参数、转码分辨率参数、存储路径以及文件系统相关参数。
4.根据权利要求1所述的视频数据的处理方法,其特征在于,预设的提取参数包括:图像采样率参数、图像采样分辨率参数、音频提取参数、音频切分率参数、存储路径以及文件系统相关参数。
5.根据权利要求4所述的视频数据的处理方法,其特征在于,
所述采样图像集合信息包括:采样图片文件、采样图片对应的视频帧目以及采样图片对应的视频播放时间;
所述音频片段集合信息包括:切分音频文件、切分音频对应的视频起始帧目以及切分音频对应的视频播放起始时间。
6.根据权利要求1-5任一项所述的视频数据的处理方法,其特征在于,所述对所述采样图像集合信息进行处理,获得图像文本信息和物品信息包括:
使用光学识别技术逐一对所述采样图像集合信息中,图像所包含的文本信息进行识别、提取,获得图像文本信息;
使用深度学习图像识别技术逐一对所述采样图像集合信息中,图像所包含的特型物品进行识别、提取,获得物品信息。
7.根据权利要求1-5任一项所述的视频数据的处理方法,其特征在于,所述对所述音频片段集合信息进行处理,获得语音文本信息包括:
使用语音识别技术逐一对所述音频片段集合信息中的人类语音信息进行识别、提取,获得语音文本信息。
8.根据权利要求1-5任一项所述的视频数据的处理方法,其特征在于,所述依据所述采样图像集合信息和所述图像文本信息,按照图像相似度计算方法,对所述采样图像集合信息进行聚类分组,获得多个视频场景包括:
对所述采样图像集合信息中的图像按固定比率进行缩放,并计算相邻两张图片的汉明距离,获得所述采样图像集合信息进行聚类分组的第一信息参数;
对所述图像文本信息统一编码,并计算相邻图像文本信息的编辑距离,获得所述采样图像集合信息进行聚类分组的第二信息参数;
对所述第一信息参数、所述第二信息参数进行加权合并,并采用线性函数进行拟合,按照斜率的变化规律进行分段,获得多个视频场景。
9.根据权利要求6所述的视频数据的处理方法,其特征在于,所述物品信息包括:特型物品名称和特型物品标签。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京知慧教育科技有限公司,未经北京知慧教育科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710114564.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种图像显示方法及装置
- 下一篇:摄像器件
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置