[发明专利]增强视频流的视频帧中的感兴趣区域的方法、计算机和介质

摘要

描述了用于增强视频流的视频帧中的感兴趣区域的方法。该方法包括接收定义至少一个基础流的基础视频帧的媒体数据，所述基础流与一个或多个增强图块流相关联，增强图块流包括定义包括图块的图块化视频帧的媒体数据，所述图块包括用于增强基础视频帧的图像区域的子区域中的视觉内容的媒体数据；请求一个或多个增强图块流的媒体数据，优选地一个或多个HEVC增强图块流的媒体数据，一个或多个增强图块流与用于增强至少一个感兴趣区域中的视觉内容的媒体数据相关联；基于至少一个基础流的媒体数据生成基础视频帧，并基于一个或多个增强图块流的媒体数据生成图块化视频帧，图块化视频帧包括形成至少一个感兴趣区域的视觉内容的一个或多个图块；以及，用图块化视频帧的所述增强视觉内容的至少一部分替换或混合所述基础流的视频帧中的所述至少一个感兴趣区域的视觉内容的至少一部分。

主权项

1.用于增强视频流的视频帧中的至少一个感兴趣区域的方法，优选地通过包括客户端设备、第一解码器、第二解码器和渲染设备的媒体设备来增强，所述方法包括：客户端设备接收定义至少一个基础流的基础视频帧的媒体数据，所述基础流与一个或多个增强图块流相关联，其中增强图块流包括定义图块化视频帧的媒体数据，图块化视频帧包括与用于增强基础视频帧的图像区域的子区域中的视觉内容的媒体数据相关联的图块，其中增强图块流的媒体数据可独立于所述基础流的媒体数据进行解码；客户端设备请求一个或多个增强图块流的媒体数据，优选地一个或多个HEVC增强图块流的媒体数据，所请求的媒体数据的图块化视频帧的一个或多个图块与基础视频帧的图像区域中的至少一个预定的感兴趣区域相关联；连接到所述客户端设备的第一解码器基于至少一个基础流的媒体数据生成基础视频帧，并且连接到客户端设备的第二解码器基于一个或多个增强图块流的媒体数据生成图块化视频帧，所生成的图块化视频帧包括在至少一个感兴趣区域中形成增强视觉内容的一个或多个图块；以及，渲染设备通过基于图块化视频帧的增强视觉内容的至少一部分修改所述基础流的视频帧中的至少一个感兴趣区域的视觉内容的至少一部分来形成包括增强感兴趣区域的视频帧，所述修改包括用图块化视频帧的增强视觉内容的至少一部分替换或混合所述基础流的视频帧中的至少一个感兴趣区域的视觉内容的至少一部分。