[发明专利]一种图像处理的方法、装置、可读存储介质和电子设备在审
申请号: | 202110287743.1 | 申请日: | 2021-03-17 |
公开(公告)号: | CN113076820A | 公开(公告)日: | 2021-07-06 |
发明(设计)人: | 陈昌儒;杨惠;徐培来 | 申请(专利权)人: | 北京大米科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;H04N21/426;H04N21/44;G10L15/14;G10L15/16;G10L25/63 |
代理公司: | 北京睿派知识产权代理事务所(普通合伙) 11597 | 代理人: | 刘锋;杨春晓 |
地址: | 100142 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 图像 处理 方法 装置 可读 存储 介质 电子设备 | ||
1.一种图像处理的方法,其特征在于,该方法包括:
获取第一视频流,其中,所述第一视频流包括至少一帧第一图像,所述第一图像包括人物;
确定所述第一图像中人物的第一情感类别;
响应于所述第一情感类别与所述第一图像对应的第二情感类别不同,根据所述第二情感类别修改所述第一图像中人物的表情,生成第二图像;
根据所述第二图像生成第二视频流。
2.如权利要求1所述的方法,其特征在于,所述第一图像对应的第二情感类别根据情感预测模型预先确定。
3.如权利要求1所述的方法,其特征在于,所述第一图像对应的第二情感类别为预先设置的。
4.如权利要求2所述的方法,其特征在于,根据情感预测模型预先确定所述第一图像对应的第二情感类别,具体包括:
将所述第一视频流中第一视频包输入到自动语音识别模型,输出所述第一视频包对应的文本信息,其中,所述第一视频包为任一所述第一图像之前设定时长的视频包;
将所述文本信息输入到语义分析模型,输出所述文本信息对应候选情感类别;
将所述候选情感类别与所述第一视频包之前N个视频包对应的历史情感类别输入到情感预测模型,输出所述第一图像对应的第二情感类别,其中,N为大于或等于1的正整数。
5.如权利要求1所述的方法,其特征在于,所述情感类别包括愉快、悲伤、平淡、厌烦、惊讶以及生气中的至少一项。
6.如权利要求1所述的方法,其特征在于,所述确定所述第一图像中人物的第一情感类别,具体包括:
通过迭代最近点ICP算法,根据所述第一图像识别确定所述第一情感类别。
7.如权利要求1所述的方法,其特征在于,所述根据所述第二情感类别修改所述第一图像中人物的表情,具体包括:
通过Voxel Hashing算法,将所述第一图像中人物的表情从所述第一情感类别修改为所述第二情感类别。
8.如权利要求4所述的方法,其特征在于,所述自动语音识别模型包括神经网络模型或者端到端模型。
9.如权利要求4所述的方法,其特征在于,所述语义分析模型包括XGBoost模型、聚类模型或者端到端模型。
10.如权利要求4所述的方法,其特征在于,所述情感预测模型为隐马尔可夫HMM模型。
11.一种图像处理的装置,其特征在于,该装置包括:
获取单元,用于获取第一视频流,其中,所述第一视频流包括至少一帧第一图像,所述第一图像包括人物;
确定单元,用于确定所述第一图像中人物的第一情感类别;
处理单元,响应于所述第一情感类别与所述第一图像对应的第二情感类别不同,用于根据所述第二情感类别修改所述第一图像中人物的表情,生成第二图像;
生成单元,用于根据所述第二图像生成第二视频流。
12.一种计算机可读存储介质,其上存储计算机程序指令,其特征在于,所述计算机程序指令在被处理器执行时实现如权利要求1-10中任一项所述的方法。
13.一种电子设备,包括存储器和处理器,其特征在于,所述存储器用于存储一条或多条计算机程序指令,其中,所述一条或多条计算机程序指令被处理器执行以实现如权利要求1-10任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京大米科技有限公司,未经北京大米科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110287743.1/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序