[发明专利]基于图片和文字生成视频的方法、装置、设备及存储介质在审
申请号: | 201711037005.1 | 申请日: | 2017-10-30 |
公开(公告)号: | CN107943839A | 公开(公告)日: | 2018-04-20 |
发明(设计)人: | 孟子扬;姚后清;施鹏 | 申请(专利权)人: | 百度在线网络技术(北京)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F17/27 |
代理公司: | 北京鸿德海业知识产权代理事务所(普通合伙)11412 | 代理人: | 袁媛 |
地址: | 100085 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 图片 文字 生成 视频 方法 装置 设备 存储 介质 | ||
【技术领域】
本发明涉及计算机应用技术,特别涉及基于图片和文字生成视频的方法、装置、设备及存储介质。
【背景技术】
随着技术的发展,视频尤其是短视频越来越流行,相比于传统的图文类形式,视频更加高效、生动,更符合用户的碎片化需求。
为此,提出了基于图片和文字自动生成视频的需求,但针对这一需求,现有技术中还没有一种有效的解决方式。
【发明内容】
有鉴于此,本发明提供了基于图片和文字生成视频的方法、装置、设备及存储介质。
具体技术方案如下:
一种基于图片和文字生成视频的方法,包括:
获取同时包含图片和对应的文字的图文单元;
分别从所述图文单元中提取出文字和图片;
根据所述文字生成音频及字幕;
从互联网中挖掘所述文字的相关图片;
根据所述相关图片、所述提取出的图片、所述音频及所述字幕生成视频。
根据本发明一优选实施例,所述根据所述文字生成音频及字幕包括:
从所述文字中提取出主题标签;
根据所述主题标签从所述文字中提取出核心内容;
生成所述核心内容对应的音频及字幕。
根据本发明一优选实施例,所述从所述文字中提取出主题标签包括:
从所述文字中提取出关键词;
过滤掉对于主题无意义的关键词,将剩余的关键词作为所述主题标签。
根据本发明一优选实施例,所述根据所述主题标签从所述文字中提取出核心内容包括:
从所述文字中提取出包含所述主题标签的内容,将提取出的内容作为所述核心内容。
根据本发明一优选实施例,所述从互联网中挖掘所述文字的相关图片包括以下之一或全部:
以所述主题标签作为关键词进行图片搜索,将搜索到的图片作为所述相关图片;
根据提取出的图片进行图片搜索,将搜索到的图片作为所述相关图片。
根据本发明一优选实施例,所述根据所述相关图片、所述提取出的图片、所述音频及所述字幕生成视频之前,进一步包括以下之一或全部:
过滤掉与所述核心内容的相关性低于预定阈值的图片;
过滤掉包含预定内容的图片。
根据本发明一优选实施例,所述预定内容包括:模糊区域、色情内容、水印。
一种基于图片和文字生成视频的装置,包括:获取单元、提取单元、第一生成单元、挖掘单元以及第二生成单元;
所述获取单元,用于获取同时包含图片和对应的文字的图文单元;
所述提取单元,用于分别从所述图文单元中提取出文字和图片;
所述第一生成单元,用于根据所述文字生成音频及字幕;
所述挖掘单元,用于从互联网中挖掘所述文字的相关图片;
所述第二生成单元,用于根据所述相关图片、所述提取出的图片、所述音频及所述字幕生成视频。
根据本发明一优选实施例,所述第一生成单元从所述文字中提取出主题标签,根据所述主题标签从所述文字中提取出核心内容,生成所述核心内容对应的音频及字幕。
根据本发明一优选实施例,所述第一生成单元从所述文字中提取出关键词,并过滤掉对于主题无意义的关键词,将剩余的关键词作为所述主题标签。
根据本发明一优选实施例,所述第一生成单元从所述文字中提取出包含所述主题标签的内容,将提取出的内容作为所述核心内容。
根据本发明一优选实施例,所述挖掘单元按照以下方式之一或全部从互联网中挖掘所述文字的相关图片:
以所述主题标签作为关键词进行图片搜索,将搜索到的图片作为所述相关图片;
根据提取出的图片进行图片搜索,将搜索到的图片作为所述相关图片。
根据本发明一优选实施例,所述挖掘单元进一步用于,针对所述相关图片以及所述提取出的图片,执行以下操作之一或全部:
过滤掉与所述核心内容的相关性低于预定阈值的图片;
过滤掉包含预定内容的图片。
根据本发明一优选实施例,所述预定内容包括:模糊区域、色情内容、水印。
一种计算机设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述程序时实现如以上所述的方法。
一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现如以上所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度在线网络技术(北京)有限公司,未经百度在线网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711037005.1/2.html,转载请声明来源钻瓜专利网。