[发明专利]播报事件识别方法、电子设备及计算机可读存储介质有效
申请号: | 201910859946.6 | 申请日: | 2019-09-11 |
公开(公告)号: | CN110569391B | 公开(公告)日: | 2021-10-15 |
发明(设计)人: | 陈晓 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/74 | 分类号: | G06F16/74;G06K9/62 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 祝亚男 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 播报 事件 识别 方法 电子设备 计算机 可读 存储 介质 | ||
1.一种播报事件识别方法,其特征在于,包括:
获取待处理的游戏视频;
识别所述待处理的游戏视频中包含的文字信息以及游戏角色信息;
基于所述包含的文字信息以及游戏角色信息,确定所述待处理的游戏视频中包含的播报事件信息;
其中,识别所述待处理的游戏视频中包含的文字信息,包括:
提取所述游戏视频的每个视频帧的第一局部特征信息,以及分别提取各个播报文字模板的第二局部特征信息,所述第一局部特征信息为从每个视频帧的播报文字区域中提取;
基于所述第一局部特征信息以及各个第二局部特征信息,确定各个匹配特征数,任一匹配特征数为所述第一局部特征信息与任一第二局部特征信息之间的匹配特征数;
基于各个匹配特征数、各个匹配字数以及惩罚因子,确定每个视频帧的播报文字区域分别与各个播报文字模板之间的相似度,基于各个相似度,确定每个视频帧中的播报文字区域包含的文字信息,其中,所述各个匹配字数为各个播报文字模板中分别包含的文字数,所述惩罚因子为针对所述匹配字数的惩罚因子,所述相似度与所述匹配特征数成正比,与所述匹配字数的所述惩罚因子次方成反比。
2.根据权利要求1所述的方法,其特征在于,识别所述待处理的游戏视频中包含的文字信息,包括:
对所述游戏视频进行视频帧采样,并确定采样的每个视频帧的播报文字区域分别与各个播报文字模板之间的相似度,并基于各个相似度,确定采样的每个视频帧中的播报文字区域包含的文字信息。
3.根据权利要求1或2所述的方法,其特征在于,基于各个相似度,确定每个视频帧的播报文字区域包含的文字信息,包括:
当所述各个相似度中的最大相似度大于预设阈值,将所述最大相似度对应的播报文字模板确定为所述每个视频帧的播报文字区域包含的文字信息。
4.根据权利要求1所述的方法,其特征在于,识别所述待处理的游戏视频中包含的游戏角色信息,包括以下任一项:
分别确定所述游戏视频中每个视频帧中的播报游戏角色区域与各游戏角色模板图像的相似度,并基于各个相似度,确定每个视频帧中的播报所包含的游戏角色信息;
对所述待处理游戏视频进行视频帧采样,并分别确定采样的每个视频帧中的播报游戏角色区域与各游戏角色模板图像的相似度,并基于各个相似度,确定采样的每个视频帧中的播报所包含的游戏角色信息。
5.根据权利要求4所述的方法,其特征在于,确定每个视频帧的播报游戏角色区域与各个游戏角色模板图像的相似度,包括:
确定各个视频帧分别对应的像素点矩阵以及各个游戏角色模板图像分别对应的像素点矩阵,任一视频帧对应的像素点矩阵包含所述任一视频帧的播报游戏角色区域的像素点值;
基于所述各个视频帧分别对应的像素点矩阵确定第一张量,以及基于所述各个游戏角色模板图像分别对应的像素点矩阵,确定第二张量;
基于所述第一张量以及所述第二张量,计算得到输出张量,所述输出张量中任一值用于表征任一视频帧的播报游戏角色区域与任一游戏角色模板图像的相似度。
6.根据权利要求5所述的方法,其特征在于,基于所述第一张量以及所述第二张量,计算得到输出张量,包括:
基于所述第一张量以及所述第二张量并通过卷积计算,得到归一化相关系数张量。
7.根据权利要求1所述的方法,其特征在于,基于所述包含的文字信息以及游戏角色信息,确定所述待处理的游戏视频中包含的播报事件信息,包括:
基于所述包含的文字信息以及游戏角色信息,确定所述待处理的游戏视频中包含每个播报事件的起始视频帧以及终止视频帧,其中,包含每个播报事件的起始视频帧与包含每个播报事件的终止视频帧之间的各个视频帧均为包含所述每个播报事件的视频帧;
基于每个播报事件的视频帧中各个视频帧的播报中包含的文字信息以及游戏角色信息,确定所述每个播报事件信息,以得到所述待处理的游戏视频中包含的播报事件信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910859946.6/1.html,转载请声明来源钻瓜专利网。