[发明专利]字幕提取方法、视频搜索方法、字幕分享方法及装置有效
申请号: | 201711064954.9 | 申请日: | 2017-11-02 |
公开(公告)号: | CN107862315B | 公开(公告)日: | 2019-09-17 |
发明(设计)人: | 王星星 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06K9/32 | 分类号: | G06K9/32;G06K9/34;G06K9/40 |
代理公司: | 北京德琦知识产权代理有限公司 11018 | 代理人: | 郭曼;王琦 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 字幕 提取 方法 视频 搜索 分享 装置 | ||
本申请提供一种字幕提取方法、视频搜索方法、字幕分享方法及装置、存储介质,该方法包括:获取待处理图像;检测所述待处理图像中的字幕区域,并将所述字幕区域的图像提取出来作为第一字幕图像;去除所述第一字幕图像中的背景,得到第二字幕图像;采用预先训练的卷积自编码器模型对所述第二字幕图像进行去噪,得到第三字幕图像;对所述第三字幕图像进行字符识别,得到字幕文本。
技术领域
本申请涉及媒体内容处理技术领域,尤其是涉及一种字幕提取方法、视频搜索方法、字幕分享方法及装置、存储介质。
背景技术
目前,安装在手机、电脑或者智能电视等终端设备上的视频客户端已经成为人们观看视频的重要工具。人们在观看视频的过程中看到比较一些比较喜欢或者特别的台词,想要将其保存下来或者分享给好友,在此场景下或者其他有需要提取字幕的场景下,有必要提供一种能够在视频画面中提取出字幕的方案。
发明内容
本申请实例提供一种字幕提取方法、视频搜索方法、字幕分享方法及装置、存储介质,以解决如何提高字幕提取中的字符识别准确度的问题。
本申请实例提供的字幕提取方法包括:
获取待处理图像;
检测所述待处理图像中的字幕区域,并将所述字幕区域的图像提取出来作为第一字幕图像;
去除所述第一字幕图像中的背景,得到第二字幕图像;
采用预先训练的卷积自编码器模型对所述第二字幕图像进行去噪,得到第三字幕图像;
对所述第三字幕图像进行字符识别,得到字幕文本。
在一些实施例中,对所述第一字幕图像进行锐化处理,包括:
确定所述第一字幕图像的清晰度和字符面积;
根据所述第一字幕图像的清晰度和字符面积,确定用于对所述第一字幕图像中的字符进行锐化处理的强度参数;
根据所述强度参数,对所述第一字幕图像进行锐化处理。
在一些实施例中,对所述第一字幕图像进行亮度调整,包括:
确定所述第一字幕图像的平均亮度;
根据所述平均亮度,对所述第一字幕图像的亮度进行调整。
在一些实施例中,对所述第一字幕图像进行对比度调整,包括:
统计所述第一字幕图像的亮度分布情况;
根据所述亮度分布情况,对所述第一字幕图像的对比度进行调整。
在一些实施例中,所述网络结构为第一网络结构,所述卷积自编码器模型还包括至少一个第二网络结构,所述至少一个第二网络结构设置在任意两个第一网络结构之间;每一个第二网络结构包括至少一个网络单元,还包括与所述至少一个网络单元连接的第二下采样层;每一个网络单元包括第五卷积层和第二上采样层,第二下采样层的输入信息为所连接的网络单元的输出信息和各个网络单元的输入信息的加权求和;除了第一个网络单元之外的每一个网络单元的输入信息为该网络单元的上一个网络单元的输出信息以及该网络单元之前的各个网络单元的输入信息的加权求和。
在一些实施例中,所述第一网络结构和所述第二网络结构的数量均为两个,第一个第二网络结构中第一个网络单元的输入信息为该网络单元所连接的第一个第一网络结构的输出信息和第一卷积层的输出信息的加权求和;第一个第一网络结构中第四卷积层的输出信息为第一卷积层的输出信息和第一下采样层的输出信息的加权求和。
对应的,本申请实例提供的字幕提取装置包括:
获取模块,用于获取待处理图像;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711064954.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种喷码识别方法和识别装置
- 下一篇:卷积运算方法及装置