[发明专利]虚拟形象直播方法、虚拟形象直播装置和电子设备有效
申请号: | 201910252004.1 | 申请日: | 2019-03-29 |
公开(公告)号: | CN109922355B | 公开(公告)日: | 2020-04-17 |
发明(设计)人: | 吴昊;许杰;蓝永峰;李政 | 申请(专利权)人: | 广州虎牙信息科技有限公司 |
主分类号: | H04N21/2187 | 分类号: | H04N21/2187;H04N21/44;H04N21/4788 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 杨奇松 |
地址: | 511400 广东省广州市番禺区南村镇万博二*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟 形象 直播 方法 装置 电子设备 | ||
本申请提供的虚拟形象直播方法、虚拟形象直播装置和电子设备,涉及网络直播技术领域。首先,通过图像获取设备获取主播的图像;然后,对图像进行人脸识别,并在图像中识别到人脸图像时,提取该人脸图像的多个人脸特征点;最后,根据多个人脸特征点和针对虚拟形象预先构建的多个面部模型对虚拟形象的面部状态进行控制。通过上述方法,可以改善现有的虚拟形象直播中存在着用户体验度较低的问题。
技术领域
本申请涉及网络直播技术领域,具体而言,涉及一种虚拟形象直播方法、虚拟形象直播装置和电子设备。
背景技术
现有技术中,为了提高网络直播的趣味性,可以采用虚拟形象替代主播的实际形象在直播画面中进行展示。但是,在现有的直播技术中虚拟形象的面部状态表现较为单一,在用户观看展示的虚拟形象时存在着体验度较低的问题,难以贴合主播的后台表现,互动感不强。
发明内容
有鉴于此,本申请的目的在于提供一种虚拟形象直播方法、虚拟形象直播装置和电子设备,以改善现有的虚拟形象直播中存在着用户体验度较低的问题。
为实现上述目的,本申请实施例采用如下技术方案:
一种虚拟形象直播方法,应用于直播设备,用于对直播画面中展示的虚拟形象进行控制,所述方法包括:
通过图像获取设备获取主播的视频帧;
对所述视频帧进行人脸识别,并在所述视频帧中识别到人脸图像时,对该人脸图像进行特征提取处理,得到多个人脸特征点;
根据所述多个人脸特征点和针对所述虚拟形象预先构建的多个面部模型对所述虚拟形象的面部状态进行控制。
在本申请实施例较佳的选择中,在上述虚拟形象直播方法中,所述根据所述多个人脸特征点以及针对所述虚拟形象预先构建的多个面部模型对所述虚拟形象的面部状态进行控制的步骤,包括:
根据所述多个人脸特征点得到主播的当前面部信息;
根据所述当前面部信息从针对所述虚拟形象预先构建的多个面部模型中获取与该当前面部信息对应的目标面部模型;以及
根据所述目标面部模型对所述虚拟形象的面部状态进行控制。
在本申请实施例较佳的选择中,在上述虚拟形象直播方法中,所述根据所述当前面部信息从针对所述虚拟形象预先构建的多个面部模型中获取与该当前面部信息对应的目标面部模型的步骤,具体为:
将所述当前面部信息与针对所述虚拟形象预先构建的多个面部模型分别进行匹配度计算,并将匹配度满足预设条件的面部模型确定为所述当前面部信息对应的目标面部模型。
在本申请实施例较佳的选择中,在上述虚拟形象直播方法中,还包括:
对执行所述特征提取处理时需要提取的目标特征点进行确定。
在本申请实施例较佳的选择中,在上述虚拟形象直播方法中,所述对执行所述特征提取处理时需要提取的目标特征点进行确定的步骤,包括:
获取主播在不同面部状态下的多个面部图像,并选取其中一个作为参考图像;
按照预设的特征提取方法分别提取出每个所述面部图像中包括的预设数量个人脸特征点;
针对每个面部图像,将该面部图像中提取出的各人脸特征点与所述参考图像中提取出的各人脸特征点进行对比,得到该面部图像中各人脸特征点相对于所述参考图像中各人脸特征点的变化值;
将变化值大于预设阈值的人脸特征点作为执行所述特征提取处理时需要提取的目标特征点。
在本申请实施例较佳的选择中,在上述虚拟形象直播方法中,所述对执行所述特征提取处理时需要提取的目标特征点进行确定的步骤,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州虎牙信息科技有限公司,未经广州虎牙信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910252004.1/2.html,转载请声明来源钻瓜专利网。