[发明专利]漫画生成方法、装置、电子设备和存储介质在审
申请号: | 202110732832.2 | 申请日: | 2021-06-29 |
公开(公告)号: | CN113393558A | 公开(公告)日: | 2021-09-14 |
发明(设计)人: | 倪敏垚 | 申请(专利权)人: | 维沃软件技术有限公司 |
主分类号: | G06T13/00 | 分类号: | G06T13/00;G06K9/62;G06T7/269;G06T7/40 |
代理公司: | 北京东方亿思知识产权代理有限责任公司 11258 | 代理人: | 桂艳球 |
地址: | 100015 北京市朝阳区酒仙桥*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 漫画 生成 方法 装置 电子设备 存储 介质 | ||
1.一种漫画生成方法,其特征在于,所述方法包括:
根据第一视频的内容,对所述第一视频进行划分,得到多个第二视频;一个所述第二视频中的各帧视频帧的内容相似度满足预设相似度条件;
针对每个所述第二视频,基于所述第二视频中的每一帧视频帧的图像帧信息,确定所述第二视频的目标转换视频帧;
针对每个所述目标转换视频帧,将所述目标转换视频帧转换为漫画图像,得到每个所述第二视频对应的漫画图像;
基于各所述漫画图像,生成所述第一视频对应的漫画。
2.根据权利要求1所述的方法,其特征在于,所述基于所述第二视频中的每一帧图像的图像帧信息,确定所述第二视频的目标转换视频帧,包括:
从所述第二视频的视频帧中,筛选出图像帧信息对应的分值满足预设条件的准目标转换视频帧;
对所述准目标转换视频帧进行清晰度处理,得到所述目标转换视频帧。
3.根据权利要求2所述的方法,其特征在于,所述对所述准目标转换视频帧进行清晰度处理,得到所述目标转换视频帧,包括:
获取所述准目标转换视频帧的参考视频帧;其中,所述参考视频帧包括第一视频帧和第二视频帧中的至少一项;所述第一视频帧为所述第二视频中位于所述准目标转换视频帧之前的M帧视频帧;所述第二视频帧为所述第二视频中位于所述准目标转换视频帧之后的N帧视频帧,M和N均为正整数;
确定所述参考视频帧到所述准目标转换视频帧的光流图;
基于所述光流图,将所述参考视频帧与所述准目标转换视频帧对齐,得到与所述参考视频帧对应的目标参考视频帧;
获取所述目标参考视频帧的第一纹理信息,以及所述准目标转换视频帧的第二纹理信息;
将所述第一纹理信息叠加到所述第二纹理信息上,得到所述目标转换视频帧。
4.根据权利要求1所述的方法,其特征在于,在所述基于各所述漫画图像,生成所述第一视频对应的漫画之前,所述方法还包括:
确定各所述第二视频对应的描述信息,所述描述信息用于描述所述第二视频所对应的场景和/或动作;
针对每个所述漫画图像,基于所述描述信息,从所述漫画图像中提取与所述描述信息对应的第一图像区域;
所述基于各所述漫画图像,生成所述第一视频对应的漫画,包括:
基于各所述漫画图像中的所述第一图像区域,生成所述第一视频对应的漫画。
5.根据权利要求4所述的方法,其特征在于,在所述基于各所述漫画图像,生成所述第一视频对应的漫画之前,所述方法还包括:
针对每个所述第二视频,获取与所述第二视频的语音信息对应的文本信息;
所述基于各所述漫画图像,生成所述第一视频对应的漫画,包括:
基于各所述漫画图像的所述第一图像区域和所述文本信息,生成所述第一视频对应的漫画。
6.根据权利要求1所述的方法,其特征在于,所述基于各所述漫画图像,生成所述第一视频对应的漫画,包括:
接收用户对第一目标漫画图像的第一输入,所述第一输入用于对所述第一目标漫画图像进行排版;
响应于所述第一输入,生成目标排版图像;
基于目标排版图像,生成所述第一视频对应的漫画;
其中,所述第一目标漫画图像为各所述漫画图像中的至少一项。
7.一种漫画生成装置,其特征在于,所述装置包括:
第二视频生成模块,用于根据第一视频的内容,对所述第一视频进行划分,得到多个第二视频;一个所述第二视频中的各帧视频帧的内容相似度满足预设相似度条件;
目标转换视频帧确定模块,用于针对每个所述第二视频,基于所述第二视频中的每一帧视频帧的图像帧信息,确定所述第二视频的目标转换视频帧;
漫画图像确定模块,用于针对每个所述目标转换视频帧,将所述目标转换视频帧转换为漫画图像,得到每个所述第二视频对应的漫画图像;
漫画生成模块,用于基于各所述漫画图像,生成所述第一视频对应的漫画。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于维沃软件技术有限公司,未经维沃软件技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110732832.2/1.html,转载请声明来源钻瓜专利网。