[发明专利]一种实时视频特效的渲染方法、系统、装置及存储介质有效
申请号: | 202110884172.X | 申请日: | 2021-08-03 |
公开(公告)号: | CN113613066B | 公开(公告)日: | 2023-03-28 |
发明(设计)人: | 陆赞信;王伟;曾荣 | 申请(专利权)人: | 天翼爱音乐文化科技有限公司 |
主分类号: | H04N21/44 | 分类号: | H04N21/44;H04N21/234;H04N21/2743 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 郑宏谋 |
地址: | 510060 广东省*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 实时 视频 特效 渲染 方法 系统 装置 存储 介质 | ||
1.一种实时视频特效的渲染方法,其特征在于,包括以下步骤:
获取第一视频素材,根据所述第一视频素材的渲染工序划分得到第一素材内容和第二素材内容;
通过渲染预测得到所述第一素材内容的第一优先级以及所述第二素材内容的第二优先级,根据所述第一优先级和所述第二优先级确定渲染队列;
根据所述渲染队列进行图形处理资源的线程分配,根据所述线程分配的结果对所述第一素材内容进行切片特效渲染得到第一渲染内容,和对第二素材内容进行特效渲染得到第二渲染内容;
将所述第一渲染内容与所述第二渲染内容进行融合渲染,输出得到特效视频;
其中,所述第一素材内容为AI特效;所述第二素材内容为基础特效;
所述通过渲染预测得到所述第一素材内容的第一优先级以及所述第二素材内容的第二优先级这一步骤,其包括:
获取所述第一素材内容平均帧特效的第一复杂度和第一素材内容的特效持续帧数;
通过所述第一复杂度和所述特效持续帧数的乘积,与所述第一视频素材的帧序列的比值表征所述第一优先级;
所述第一优先级的计算公式为:
PAI表征第一优先级,fAI表征所述AI特效的起始帧序列,OAI表征所述AI特效平均帧特效时间复杂度,m表征所述AI特效的持续帧数;
所述通过渲染预测得到所述第一素材内容的第一优先级以及所述第二素材内容的第二优先级这一步骤,其包括:
获取所述第二素材内容平均帧特效的第二复杂度和所述第一视频素材的帧率;
通过所述第二复杂度和所述帧率的乘积,与所述第一视频素材的帧序列的比值表征所述第二优先级;
所述第二复杂度的计算公式为:
Of表征每一帧所述基础特效的渲染时间复杂度,O表征帧像素遍历时间复杂度,On表征每一层基础特效时间复杂度,i=1,2,3,…,n;
所述第二优先级的计算公式为:
Pf表征第二优先级,f表征待渲染视频的帧序列,r表征帧率。
2.根据权利要求1所述的一种实时视频特效的渲染方法,其特征在于,所述根据所述线程分配的结果对所述第一素材内容进行切片特效渲染得到第一渲染内容这一步骤,其包括:根据所述特效持续帧数将所述帧序列进行分组,将分组结果进行排序得到切片序列,根据所述切片序列进行特效渲染得到所述第一渲染内容。
3.根据权利要求1所述的一种实时视频特效的渲染方法,其特征在于,所述根据所述线程分配的结果对所述第一素材内容进行切片特效渲染得到第一渲染内容这一步骤,其还包括:
获取所述第一素材内容的渲染任务请求;
确认请求通过,获取网络性能参数;
根据预设的可容忍延迟时间以及渲染延迟的正态分布峰值,结合所述网络性能参数确定所述第一素材内容的切块帧数信息。
4.根据权利要求1-3任一项所述的一种实时视频特效的渲染方法,其特征在于,所述根据所述渲染队列进行图形处理资源的线程分配这一步骤,其包括:
将所述第一素材内容分配至服务器端图形处理资源进行特效渲染;
将所述第二素材内容分配至本地图形处理资源和/或所述服务器端图形处理资源进行特效渲染。
5.根据权利要求1-3任一项所述的一种实时视频特效的渲染方法,其特征在于,所述方法还包括以下步骤:
将所述第一渲染内容与所述第二渲染内容进行整合得到视频特效模板和/或特效素材;
获取第二视频素材,将所述视频特效模板和/或所述特效素材与所述第二视频素材进行合成得到所述特效视频。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天翼爱音乐文化科技有限公司,未经天翼爱音乐文化科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110884172.X/1.html,转载请声明来源钻瓜专利网。