[发明专利]一种改进的场景内容检测的方法和系统在审

专利信息
申请号: 202210685000.4 申请日: 2022-06-15
公开(公告)号: CN115019234A 公开(公告)日: 2022-09-06
发明(设计)人: 吴冠标;孙涛;陈涛 申请(专利权)人: 天津市国瑞数码安全系统股份有限公司
主分类号: G06V20/40 分类号: G06V20/40;G06V20/70;G06N3/04;G06V10/82;G06V10/764;G06V10/762;G06V10/74;G06V10/46;G06F17/18;G06F17/16
代理公司: 北京秉文同创知识产权代理事务所(普通合伙) 11859 代理人: 陈少丽;孙富利
地址: 300392 天津市西青区华*** 国省代码: 天津;12
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 改进 场景 内容 检测 方法 系统
【权利要求书】:

1.一种改进的场景内容检测的方法,其特征在于,所述方法包括:

接收采集终端发送的多媒体数据,从中提取出视觉特征、声音特征和文本特征,将所述视觉特征、声音特征和文本特征列入第一向量矩阵的三个维度,将所述第一向量矩阵送入神经网络模型的输入端;

其中,所述神经网络模型具有三个输入端,三个输入端分别接入对应的中间层,经过运算处理后,连接到三个缓冲区,其中一个中间层包括一个全态连接单元,所述全态连接单元会将中间层的结果反馈给其余两个缓冲区,所述其余两个缓冲区根据反馈修正数据,所述三个缓冲区输出经过加权求和后得到一个输出端;

所述神经网络模型对所述第一向量矩阵进行运算,剔除单个维度偏差大于预设阈值的特征值,得到机器学习后的第二高维度向量矩阵;

将所述第二高维度向量矩阵输入到状态链模型,根据预设的概率密度函数,确定所述多媒体数据对应的显性特征分布区域,得出可能的隐性特征分布区域,提取所述可能的隐性特征分布区域中的多个第三向量矩阵,分解所述第三向量矩阵得到隐性特征;

语义分析上述隐性特征,得到多个待定语义特征,并计算所述多个待定语义特征之间的相关度,去除其中相关度低于阈值的待定语义特征,确定所述多媒体数据对应的语义特征集合;

将所述第二高维度向量矩阵和所述语义特征集合输入计算函数,同时引入状态链模型的概率密度参数,得到所述第三向量矩阵到所述第二高维度向量矩阵的条件概率公式,经由神经网络模型计算该条件概率公式,计算得到最优的第三向量矩阵;

根据所述最优的第三向量矩阵之间的分布情况,确定不同场景划分的分界线,根据所述分界线将多媒体数据划分为不同的场景段,依次进行语义分析,得到对应不同场景段的语义标签;

根据所述语义标签,调用不同的内容检测算法,对所述语义标签对应的场景段进行内容检测。

2.根据权利要求1所述的方法,其特征在于:所述语义分析还包括聚类操作,对同一类的场景段集中分析。

3.根据权利要求2所述的方法,其特征在于:所述接收采集终端发送的多媒体数据流包括对所述多媒体数据流的编解码。

4.根据权利要求3所述的方法,其特征在于:所述语义分析采用神经网络模型。

5.一种改进的场景内容检测的系统,其特征在于,所述系统包括处理器以及存储器:

所述存储器用于存储程序代码,并将所述程序代码传输给所述处理器;

所述处理器用于根据所述程序代码中的指令执行实现权利要求1-4任一项所述的方法。

6.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质用于存储程序代码,所述程序代码用于执行实现权利要求1-4任一项所述的方法。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津市国瑞数码安全系统股份有限公司,未经天津市国瑞数码安全系统股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202210685000.4/1.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top