[发明专利]视频处理方法和装置、用于视频处理的装置有效
申请号: | 201710737274.2 | 申请日: | 2017-08-24 |
公开(公告)号: | CN109429078B | 公开(公告)日: | 2022-02-22 |
发明(设计)人: | 张杰;卜海亮;靳一笑;邢真臻;蒋品;冯新强 | 申请(专利权)人: | 北京搜狗科技发展有限公司 |
主分类号: | H04N21/234 | 分类号: | H04N21/234;H04N21/44;H04N21/233;H04N21/439;H04N21/235;H04N21/435;G06V20/40;G06V20/62 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 莎日娜 |
地址: | 100084 北京市海淀区中关*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 处理 方法 装置 用于 | ||
1.一种视频处理方法,其特征在于,包括:
对视频包括的视频帧进行图像识别,以得到所述视频帧对应的图像识别结果;
从预置物品库中获取与所述图像识别结果相匹配的目标物品;
将所述目标物品对应的目标信息添加在所述视频帧中;
所述方法还包括:
对视频对应的视频流进行文本识别,以得到对应的文本信息;和/或,对视频对应的音频流进行语音识别,以得到对应的文本信息;
从预置物品库中获取与所述文本信息相匹配的第二目标物品;
根据所述第二目标物品对应的目标信息,对视频流中对应字幕位置的文本信息进行修改;
依据所述第二目标物品对应的目标信息,对所述音频流进行修改。
2.根据权利要求1所述的方法,其特征在于,所述从预置物品库中获取与所述图像识别结果相匹配的目标物品,包括:
判断所述图像识别结果中是否包括与所述预置物品库中第一物品相同、相似或者同类别的第二物品,若是,则将所述第一物品作为与所述图像识别结果相匹配的目标物品。
3.根据权利要求2所述的方法,其特征在于,所述判断所述图像识别结果中是否包括与所述预置物品库中第一物品相同、相似或者同类别的第二物品,包括:
将所述图像识别结果包括的第二物品的特征信息与所述预置物品库中第一物品的特征信息进行匹配,以得到对应的匹配结果;
若所述匹配结果为匹配成功,则确定所述图像识别结果中包括与所述预置物品库中第一物品相同、相似或者同类别的目标物品;
其中,所述特征信息包括:形状、颜色和类别中的至少一种。
4.根据权利要求1所述的方法,其特征在于,所述将所述目标物品对应的目标信息添加在所述视频帧中,包括:
确定所述视频帧中用于添加目标信息的目标位置;
在所述视频帧中的目标位置添加所述目标信息。
5.根据权利要求4所述的方法,其特征在于,所述确定所述视频帧中用于添加所述目标信息的目标位置,包括:
确定所述视频帧的已有物品与所述目标物品之间的符合度;从所述视频帧的已有物品中获取符合度符合预置条件的物品的位置,作为目标位置;和/或,
识别出视频帧中适合于添加所述目标信息的预置图像目标区域,将所述预置图像目标区域作为所述目标位置。
6.根据权利要求4所述的方法,其特征在于,所述目标位置为字幕相关位置;
所述在所述视频帧中的所述目标位置添加所述目标信息包括:
依据目标信息对所述视频帧中包括的字幕进行修改,以在所述视频帧包括的字幕中添加所述目标信息;和/或,
将目标信息作为所述视频帧中字幕的附加信息添加在所述字幕周围,以在所述视频帧中添加所述目标信息。
7.根据权利要求1所述的方法,其特征在于,所述将所述目标物品对应的目标信息添加在所述视频帧中,包括:
依据所述目标信息,对所述视频帧中对应目标位置的信息进行修改,以得到修改后的包括所述目标信息的视频帧;或者
将所述目标信息作为所述视频帧中对应目标位置的附加信息添加入所述视频帧。
8.根据权利要求7所述的方法,其特征在于,所述对所述视频帧中对应目标位置的信息进行修改,包括:
将所述视频帧中对应目标位置的第一像素值替换为目标信息对应的第二像素值,所述目标信息对应的第二像素值依据图片格式的目标信息和/或文本格式的目标信息的色彩值确定;和/或,
对视频帧中对应字幕位置的文本信息进行修改,以将对应字幕位置的文本信息修改为文本格式的目标信息。
9.根据权利要求1至8中任一所述的方法,其特征在于,所述方法还包括:
对所述视频包括的连续视频帧中的图像目标进行图像跟踪;
依据图像跟踪结果针对后续的视频帧中的图像目标,复用之前的视频帧中相同图像目标对应的目标信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京搜狗科技发展有限公司,未经北京搜狗科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710737274.2/1.html,转载请声明来源钻瓜专利网。