[发明专利]一种视频图像处理方法、计算机可读存储介质和终端在审
申请号: | 201711474216.1 | 申请日: | 2017-12-29 |
公开(公告)号: | CN108259983A | 公开(公告)日: | 2018-07-06 |
发明(设计)人: | 危文;袁少龙;周宇涛;丘智鉴;颜乐驹;魏启征;李敬 | 申请(专利权)人: | 广州市百果园信息技术有限公司 |
主分类号: | H04N21/439 | 分类号: | H04N21/439;H04N21/84;H04N21/431;H04N21/485;H04N21/81;G10L25/57 |
代理公司: | 北京市立方律师事务所 11330 | 代理人: | 刘延喜 |
地址: | 511442 广东省广州市番禺区南村*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 音乐 播放 节拍 视频 视频图像处理 视频图像 视频应用 音频特征 计算机可读存储介质 服务器下载 播放位置 输入获取 用户体验 互动性 满意度 听觉 匹配 视觉 图像 终端 关联 | ||
1.一种视频图像处理方法,其特征在于,包括如下步骤:
识别播放视频中声音的音频特征;
从服务器下载与所述音频特征匹配的音乐和所述音乐的节拍点对应的特效;
在所述播放视频中播放所述音乐,确定在所述音乐的当前播放位置出现节拍点;
根据所确定的节拍点对应的特效对播放视频中的图像进行处理,获得包含所述特效的视频图像。
2.根据权利要求1所述的视频图像处理方法,其特征在于,所述在所述播放视频中播放所述音乐,确定在所述音乐的当前播放位置出现节拍点之前,还包括:
从服务器下载记录所述音乐的音乐播放位置与节拍点的对应关系的节拍点描述文件;
所述确定在所述音乐的当前播放位置出现节拍点,包括:
根据所述节拍点描述文件中的对应关系,确定在所述音乐的当前播放位置出现节拍点。
3.根据权利要求1所述的视频图像处理方法,其特征在于,所述在所述播放视频中播放所述音乐,确定在所述音乐的当前播放位置出现节拍点之前,还包括:
获取所述音乐的音乐信号;根据所述音乐信号检测出所述音乐的节拍点;记录所述音乐播放位置与节拍点的对应关系;
所述确定在所述音乐的当前播放位置出现节拍点,包括:
根据所述对应关系,确定在所述音乐的当前播放位置出现节拍点。
4.根据权利要求1所述的视频图像处理方法,其特征在于,所述视频为直播视频;
所述识别播放视频中声音的音频特征,包括:
在直播视频中接收客户端发送的观众哼唱点歌请求;
接收客户端发送的观众哼唱声音;
识别所述观众哼唱声音的音频特征;
获得包含所述特效的视频图像之后,还包括:
向客户端发送处理后的视频图像。
5.根据权利要求1所述的视频图像处理方法,其特征在于,所述视频为直播视频;
所述识别播放视频中声音的音频特征,包括:
在直播视频中接收主播发送的哼唱下载歌曲指令;
接收主播发送的主播哼唱声音;
识别所述主播哼唱声音的音频特征。
6.根据权利要求3所述的视频图像处理方法,其特征在于,所述节拍点包括强节拍点和弱节拍点;
所述根据所述音乐信号检测出所述音乐的节拍点,包括:
对所述音乐信号进行滤波,滤波后进行短时傅立叶变换,获得频谱;
根据所述频谱,确定检测点的能量变化值;
根据能量变化值,检测出检测点出现强节拍点或弱节拍点。
7.根据权利要求3所述的视频图像处理方法,其特征在于,所述节拍点包括强节拍点和弱节拍点;
所述根据所述音乐信号检测出所述音乐的节拍点,包括:
对所述音乐信号进行加权处理,获得加权后的音乐信号;
根据所述加权后的音乐信号的能量强度值,检测出检测点出现强节拍点或弱节拍点。
8.根据权利要求3所述的视频图像处理方法,其特征在于,所述节拍点包括强节拍点;
所述根据所述音乐信号检测出所述音乐的节拍点,包括:
根据所述音乐信号的能量强度值获得候选节拍点;
根据各候选节拍点,统计各相邻两个候选节拍点所在帧之间的时间间隔;
根据所述时间间隔,检测出候选节拍点对应检测点出现强节拍点。
9.根据权利要求3所述的视频图像处理方法,其特征在于,所述节拍点包括强节拍点;
所述根据所述音乐信号检测出所述音乐的节拍点,包括:
根据检测点的音乐信号的能量变化差值,获得候选节拍点;
根据所述候选节拍点,以各相邻两个候选节拍点作为信号起始点截取两段音乐信号;
根据两段音乐信号的对比结果,检测出候选节拍点对应检测点出现强节拍点。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州市百果园信息技术有限公司,未经广州市百果园信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711474216.1/1.html,转载请声明来源钻瓜专利网。