[发明专利]视频数据检索方法、装置、设备、介质及产品在审
| 申请号: | 202111033509.2 | 申请日: | 2021-09-03 |
| 公开(公告)号: | CN113672764A | 公开(公告)日: | 2021-11-19 |
| 发明(设计)人: | 李俊彦 | 申请(专利权)人: | 海信电子科技(武汉)有限公司 |
| 主分类号: | G06F16/735 | 分类号: | G06F16/735;G06F16/783;G06N3/04;G06N3/08;G06F40/295 |
| 代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 刘丹;臧建明 |
| 地址: | 430073 湖北省武汉市东湖新技术开发*** | 国省代码: | 湖北;42 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 视频 数据 检索 方法 装置 设备 介质 产品 | ||
1.一种视频数据检索方法,其特征在于,包括:
接收终端设备发送的用户语音信息;
确定所述用户语音信息对应的语义相关信息;
根据所述用户语音信息和所述语义相关信息在预设的视频信息数据库中搜索出匹配的目标视频片段信息;所述预设的视频信息数据库存储有包括所述目标视频片段信息在内的多个视频片段信息,各视频片段信息是根据对应的最终视频片段图片的图片相关特征和所属的视频数据标识生成的,所述最终视频片段图片是属于预设情节类型的视频片段图片;
向终端设备发送所述目标视频片段信息,所述目标视频片段信息用于指示终端设备播放对应的目标视频片段。
2.根据权利要求1所述的方法,其特征在于,所述语义相关信息包括用户语音信息的分词信息和核心实体信息;
所述确定所述用户语音信息对应的语义相关信息,包括:
对所述用户语音信息进行分词处理,以确定对应的分词信息;
对所述用户语音信息进行命名实体识别,以确定对应的核心实体信息。
3.根据权利要求2所述的方法,其特征在于,所述根据所述用户语音信息和所述语义相关信息在预设的视频信息数据库中搜索出匹配的目标视频片段信息,包括:
根据所述分词信息和所述核心实体信息在预设的视频信息数据库中搜索出匹配的至少一个候选视频片段信息;
将所述用户语音信息和各候选视频片段信息进行语义相似度计算,以确定用户语音信息与各候选视频片段信息之间的相似度;
将相似度大于预设相似阈值的候选视频片段信息确定为目标视频片段信息。
4.根据权利要求3所述的方法,其特征在于,所述根据所述用户语音信息和所述语义相关信息在预设的视频信息数据库中搜索出匹配的目标视频片段信息之前,还包括:
获取待处理的视频数据和对应的视频数据标识;
按照预设的抽取去重策略对所述目标视频数据进行抽取去重处理,以生成抽取去重后的多个初始视频片段图片;
根据训练至收敛的卷积神经网络和所述初始视频片段图片确定最终视频片段图片;
将所述最终视频片段图片的图片相关特征和所属的视频数据标识确定为视频数据对应的视频片段信息,并将视频数据对应的视频片段信息存储在预设的视频信息数据库中,所述图片相关特征包括图片所属预设情节类别及在视频数据中所属视频时间。
5.根据权利要求4所述的方法,其特征在于,所述根据训练至收敛的卷积神经网络和所述初始视频片段图片确定最终视频片段图片,包括:
将所述初始视频片段图片输入训练至收敛的卷积神经网络,以输出初始视频片段图片对应的所属情节类别和所属情节类别对应的概率数值;
判断所述初始视频片段图片所属情节类别对应的概率数值是否大于预设概率阈值;
若确定初始视频片段图片所属情节类别对应的概率数值大于预设概率阈值,则将该初始视频片段图片确定为最终视频片段图片。
6.根据权利要求4所述的方法,其特征在于,所述按照预设的抽取去重策略对所述目标视频数据进行抽取去重处理,以生成抽取去重后的多个初始视频片段图片,包括:
按照预设的抽取策略对所述目标视频数据进行抽取,以生成多个抽取后的视频片段图片;
对各抽取后的视频片段图片进行去重处理,以确定去重后的初始视频片段图片。
7.根据权利要求6所述的方法,其特征在于,所述对各抽取后的视频片段图片进行去重处理,以确定去重后的初始视频片段图片,包括:
将各所述抽取后的视频片段图片按照所属视频时间进行排序,以生成排序后的视频片段图片;
对排序后的视频片段图片分别进行平均哈希处理,以确定各所述抽取后的视频片段图片对应的平均哈希向量;
根据各所述抽取后的视频片段图片对应的平均哈希向量确定抽取后的视频片段图片之间的汉明距离,并根据所述汉明距离,对各抽取后的视频片段图片进行去重处理,以确定去重后的初始视频片段图片。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于海信电子科技(武汉)有限公司,未经海信电子科技(武汉)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111033509.2/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





