[发明专利]音视频通信方法、装置、计算机装置、及可读存储介质有效
| 申请号: | 201910305621.3 | 申请日: | 2019-04-16 |
| 公开(公告)号: | CN110225285B | 公开(公告)日: | 2022-09-02 |
| 发明(设计)人: | 齐燕 | 申请(专利权)人: | 深圳壹账通智能科技有限公司 |
| 主分类号: | H04N7/14 | 分类号: | H04N7/14;G06V20/40;G06V40/16;G06V10/774;G06V10/764;G06V10/74 |
| 代理公司: | 深圳市赛恩倍吉知识产权代理有限公司 44334 | 代理人: | 杨毅玲;刘丽华 |
| 地址: | 518052 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 视频 通信 方法 装置 计算机 可读 存储 介质 | ||
1.一种音视频通信方法,其特征在于,所述方法包括:
当与外部设备进行音视频通信时,获取待传输的音视频数据,从所述待传输的音视频数据中提取音视频相关参数;
调用预先训练生成的场景识别模型,根据所获取的音视频相关参数识别用户当前所处场景;
根据用户当前所处场景确定对所述待传输的音视频数据的处理方式,当用户当前所处场景为室外时,确定对所述待传输的音视频数据的处理方式为第一方式,其中,所述第一方式是指对所述待传输的音视频数据的处理至少包括降噪处理;当用户当前所处场景为室内时,确定对所述待传输的音视频数据的处理方式为第二方式,其中,所述第二方式是指根据室内面积和室内墙壁的材质处理所述待传输的音视频数据;及
根据所述确定的处理方式对所述待传输的音视频数据进行处理,并将处理后的所述音视频数据传输给所述外部设备。
2.如权利要求1所述的音视频通信方法,其特征在于,训练所述场景识别模型的方法包括:
获取预设数量的与不同的场景分别对应的音视频相关参数,并对与每种场景所对应的音视频相关参数标注类别,使得与所述每种场景所对应的音视频相关参数携带类别标签;
分别将与所述不同场景对应的音视频相关参数随机分成第一预设比例的训练集和第二预设比例的验证集,利用所述训练集训练所述场景识别模型,并利用所述验证集验证训练后的所述场景识别模型的准确率;及
若所述准确率大于或者等于预设准确率时,则结束训练;若所述准确率小于所述预设准确率时,则增加样本数量以重新训练所述场景识别模型直至所述准确率大于或者等于预设准确率。
3.如权利要求1所述的音视频通信方法,其特征在于,所述根据室内面积和室内墙壁的材质处理所述待传输的音视频数据包括步骤:
估算室内面积的大小;
从所述待传输的音视频数据中截取一帧包括墙壁的图像;
利用图像识别算法将所截取的墙壁的图像与预先存储的多张不同材质的图像进行匹配以确定所述墙壁的材质;根据所述墙壁的材质确定吸声系数;
将所述室内面积乘以所确定的吸声系数估算吸声量;及
根据所估算获得的吸声量处理所述待传输的音视频数据,其中,当所估算获得的吸声量大于一个预设的吸声量值时,对所述待传输的音视频数据的处理至少包括去混响处理,当所估算获得的吸声量小于或者等于所述预设的吸声量值时,对所述待传输的音视频数据的处理不包括去混响处理。
4.如权利要求3所述的音视频通信方法,其特征在于,所述估算室内面积的大小包括:
从所述音视频数据中截取一帧包括用户的头像的图像;
计算所述用户的头像所包括的第一像素点总数,以及计算所述截取的图像所包括的第二像素点总数;
根据所述第一像素点总数和第二像素点总数之间的比值估算所述室内面积的大小,其中,所述室内面积的大小等于一个预设值除以所述比值。
5.如权利要求1所述的音视频通信方法,其特征在于,所述根据所述确定的处理方式对所述待传输的音视频数据进行处理后,所述方法还包括:
确定所述待传输的音视频数据所包括的视频图像中是否存在多个人像;
当确定所述视频图像中存在多个人像时,识别所述视频图像中正对镜头的人像,当所述视频图像中不存在多个人像时,则不对所述视频图像中正对镜头的人像进行识别;及
将所述视频图像中,除所述正对镜头的人像之外的其他人像作虚化处理。
6.如权利要求1所述的音视频通信方法,其特征在于,所述根据所述确定的处理方式对所述待传输的音视频数据进行处理后,所述方法还包括:
获取所述待传输的音视频数据中的视频图像的平均亮度;
判断视频图像的平均亮度是否小于预设的亮度阈值;及
当视频图像的平均亮度小于所述预设的亮度阈值,对视频图像进行亮度增强,当视频图像的平均亮度大于或者等于所述预设的亮度阈值,则不对视频图像进行亮度增强处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳壹账通智能科技有限公司,未经深圳壹账通智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910305621.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种同轴供电方法、装置及系统
- 下一篇:一种远程遛狗设备以及远程遛狗控制系统





