[发明专利]一种改进的场景内容检测的方法和系统在审
申请号: | 202210685000.4 | 申请日: | 2022-06-15 |
公开(公告)号: | CN115019234A | 公开(公告)日: | 2022-09-06 |
发明(设计)人: | 吴冠标;孙涛;陈涛 | 申请(专利权)人: | 天津市国瑞数码安全系统股份有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V20/70;G06N3/04;G06V10/82;G06V10/764;G06V10/762;G06V10/74;G06V10/46;G06F17/18;G06F17/16 |
代理公司: | 北京秉文同创知识产权代理事务所(普通合伙) 11859 | 代理人: | 陈少丽;孙富利 |
地址: | 300392 天津市西青区华*** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 改进 场景 内容 检测 方法 系统 | ||
1.一种改进的场景内容检测的方法,其特征在于,所述方法包括:
接收采集终端发送的多媒体数据,从中提取出视觉特征、声音特征和文本特征,将所述视觉特征、声音特征和文本特征列入第一向量矩阵的三个维度,将所述第一向量矩阵送入神经网络模型的输入端;
其中,所述神经网络模型具有三个输入端,三个输入端分别接入对应的中间层,经过运算处理后,连接到三个缓冲区,其中一个中间层包括一个全态连接单元,所述全态连接单元会将中间层的结果反馈给其余两个缓冲区,所述其余两个缓冲区根据反馈修正数据,所述三个缓冲区输出经过加权求和后得到一个输出端;
所述神经网络模型对所述第一向量矩阵进行运算,剔除单个维度偏差大于预设阈值的特征值,得到机器学习后的第二高维度向量矩阵;
将所述第二高维度向量矩阵输入到状态链模型,根据预设的概率密度函数,确定所述多媒体数据对应的显性特征分布区域,得出可能的隐性特征分布区域,提取所述可能的隐性特征分布区域中的多个第三向量矩阵,分解所述第三向量矩阵得到隐性特征;
语义分析上述隐性特征,得到多个待定语义特征,并计算所述多个待定语义特征之间的相关度,去除其中相关度低于阈值的待定语义特征,确定所述多媒体数据对应的语义特征集合;
将所述第二高维度向量矩阵和所述语义特征集合输入计算函数,同时引入状态链模型的概率密度参数,得到所述第三向量矩阵到所述第二高维度向量矩阵的条件概率公式,经由神经网络模型计算该条件概率公式,计算得到最优的第三向量矩阵;
根据所述最优的第三向量矩阵之间的分布情况,确定不同场景划分的分界线,根据所述分界线将多媒体数据划分为不同的场景段,依次进行语义分析,得到对应不同场景段的语义标签;
根据所述语义标签,调用不同的内容检测算法,对所述语义标签对应的场景段进行内容检测。
2.根据权利要求1所述的方法,其特征在于:所述语义分析还包括聚类操作,对同一类的场景段集中分析。
3.根据权利要求2所述的方法,其特征在于:所述接收采集终端发送的多媒体数据流包括对所述多媒体数据流的编解码。
4.根据权利要求3所述的方法,其特征在于:所述语义分析采用神经网络模型。
5.一种改进的场景内容检测的系统,其特征在于,所述系统包括处理器以及存储器:
所述存储器用于存储程序代码,并将所述程序代码传输给所述处理器;
所述处理器用于根据所述程序代码中的指令执行实现权利要求1-4任一项所述的方法。
6.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质用于存储程序代码,所述程序代码用于执行实现权利要求1-4任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津市国瑞数码安全系统股份有限公司,未经天津市国瑞数码安全系统股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210685000.4/1.html,转载请声明来源钻瓜专利网。
- 内容再现系统、内容提供方法、内容再现装置、内容提供装置、内容再现程序和内容提供程序
- 内容记录系统、内容记录方法、内容记录设备和内容接收设备
- 内容服务系统、内容服务器、内容终端及内容服务方法
- 内容分发系统、内容分发装置、内容再生终端及内容分发方法
- 内容发布、内容获取的方法、内容发布装置及内容传播系统
- 内容提供装置、内容提供方法、内容再现装置、内容再现方法
- 内容传输设备、内容传输方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容发送设备、内容发送方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容再现装置、内容再现方法、内容再现程序及内容提供系统
- 内容记录装置、内容编辑装置、内容再生装置、内容记录方法、内容编辑方法、以及内容再生方法