[发明专利]视频流的生成方法、装置、设备及存储介质有效
申请号: | 202011643811.5 | 申请日: | 2020-12-30 |
公开(公告)号: | CN112788278B | 公开(公告)日: | 2023-04-07 |
发明(设计)人: | 曹璨;李峥;戴宁;姜俊;王昕;魏建强;付明鑫 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | H04N7/15 | 分类号: | H04N7/15;H04N23/67;G10L21/0208;H04L65/403;H04L65/60;H04L65/80 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 王萌 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 生成 方法 装置 设备 存储 介质 | ||
本公开公开了一种视频流的生成方法、装置、设备及存储介质,涉及语音技术领域、视频处理技术领域、计算机视觉技术领域和深度学习技术领域。具体实现方案为:当监测到语音数据时,确定与语音数据对应的第一发言用户;控制预设摄像头对焦第一发言用户拍摄第一视频帧图像,并采集第一发言用户的第一发言数据;对第一发言数据中的噪音数据进行去噪处理,得到第一目标数据;根据第一目标数据和第一视频帧图像生成视频流。由此,在视频流传输场景下,聚焦发言人进行视频帧图像的拍摄,并且抑制非发言人的噪音,提高了视频流的质量,满足了多种场景下的视频需求。
技术领域
本公开涉及语音技术领域、视频处理技术领域、计算机视觉技术领域和深度学习技术领域,尤其涉及一种视频流的生成方法、装置、设备及存储介质。
背景技术
随着计算机技术的发展,基于计算机技术的视频场景也越发普遍,比如,在室内视频会议,或者是在室外视频会议等。
相关技术中,对于室内的多人视频会议,两地沟通需要极强纽带和感知度,传统设备有背景噪音和人声干扰,且摄像头不好聚焦难定位主要发言人。对于室外的大厅、车站、开放空间的音视频通讯,会有背景嘈杂、人声干扰,不便会议。
发明内容
本公开提供了一种视频流的生成方法、装置、设备及存储介质,实现了在视频流传输场景下,聚焦发言人进行视频帧图像的拍摄,并且抑制非发言人的噪音,提高了视频流的质量,满足了多种场景下的视频需求。
根据本公开的一方面,提供了一种视频流的生成方法,包括:当监测到语音数据时,确定与所述语音数据对应的第一发言用户;控制预设摄像头对焦所述第一发言用户拍摄第一视频帧图像,并采集所述第一发言用户的第一发言数据;对所述第一发言数据中的噪音数据进行去噪处理,得到第一目标数据;根据所述第一目标数据和所述第一视频帧图像生成视频流。
根据本公开的另一方面,提供了一种视频流的生成装置,包括:确定模块,用于当监测到语音数据时,确定与所述语音数据对应的第一发言用户;拍摄模块,用于控制预设摄像头对焦所述第一发言用户拍摄第一视频帧图像,并采集所述第一发言用户的第一发言数据;采集模块,用于对所述第一发言数据中的噪音数据进行去噪处理,得到第一目标数据;去噪模块,用于对所述第一发言数据中的噪音数据进行去噪处理,得到第一目标数据;生成模块,用于根据所述第一目标数据和所述第一视频帧图像生成视频流。
本公开的根据本公开的又一方面,提供了一种电子设备,包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述实施例所描述的视频流的生成方法。
根据本公开的再一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行上述实施例所描述的视频流的生成方法。
根据本公开的还一方面,提供了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现上述实施例所描述的视频流的生成方法。
本公开的实施例,至少具备如下附加的技术效果:
当监测到语音数据时,确定与语音数据对应的第一发言用户,控制预设摄像头对焦第一发言用户拍摄第一视频帧图像,并采集第一发言用户的第一发言数据,进而,对第一发言数据中的噪音数据进行去噪处理,得到第一目标数据,最后,根据第一目标数据和第一视频帧图像生成视频流。由此,在视频流传输场景下,聚焦发言人进行视频帧图像的拍摄,并且抑制非发言人的噪音,提高了视频流的质量,满足了多种场景下的视频需求。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本公开的限定。其中:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011643811.5/2.html,转载请声明来源钻瓜专利网。