[发明专利]在高效率视频写码及分层高效率视频写码文件格式的图块分组的改进有效

专利信息
申请号: 201780018727.4 申请日: 2017-03-28
公开(公告)号: CN108886642B 公开(公告)日: 2021-05-14
发明(设计)人: 伏努·亨利;王业奎 申请(专利权)人: 高通股份有限公司
主分类号: H04N21/854 分类号: H04N21/854;H04N19/70;H04N19/30
代理公司: 北京市柳沈律师事务所 11105 代理人: 安之斐
地址: 美国加利*** 国省代码: 暂无信息
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 高效率 视频 分层 文件格式 分组 改进
【说明书】:

本发明揭示一种装置,所述装置产生文件中的网络抽象层NAL单元映射项方块。所述NAL单元映射项方块使NAL单元与图块集相关联,所述图块集包含当前图片经分割成的多个图块中的两个或多于两个图块。由所述图块集覆盖的所述当前图片的区可为非矩形的。另外,所述装置产生所述文件中的图块集群组项。所述图块集群组项包含水平偏移、垂直偏移、宽度及高度。所述水平偏移规定覆盖所述图块集中的图块的最小矩形区的左上方像素的水平偏移。所述垂直偏移规定所述最小矩形区的所述左上方像素的垂直偏移。所述宽度规定所述最小矩形区的宽度。所述高度规定所述最小矩形区的高度。

本申请案主张在2016年3月30日提出申请的美国临时专利申请案62/315,575的权益,所述美国临时申请案的全部内容以引用的方式并入本文中。

技术领域

本发明涉及视频写码及用于经写码的视频数据的文件格式。

背景技术

数字视频能力可并入到广泛范围的装置中,包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或桌面计算机、平板计算机、电子书阅读器、数字摄像机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏主机、蜂窝式或卫星无线电电话、所谓“智能电话”、视频电话会议装置、视频流式处理装置及其类似者。数字视频装置实施视频压缩技术,例如由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4第10部分、高级视频写码(AVC)、ITU-T H.265/高效率视频写码(HEVC)所定义的标准及此些标准的延伸中所描述的那些技术。视频装置可通过实施此些视频压缩技术而更高效地发射、接收、编码、解码及/或存储数字视频信息。

视频压缩技术执行空间(图片内)预测及/或时间(图片间)预测以减少或移除视频序列中固有的冗余。针对基于块的视频写码,可将视频分片(即,视频帧或视频帧的部分)分割成视频块,所述视频块也可被称作树块、写码单元(CU)及/或写码节点。图片的帧内写码(I)分片中的视频块为使用关于同一图片中的相邻块中的参考样本的空间预测来编码。图片的帧间写码(P或B)分片中的视频块可使用关于同一图片中的相邻块中的参考样本的空间预测或关于其它参考图片中的参考样本的时间预测。图片可被称作帧,且参考图片可被称作参考帧。

发明内容

本发明的一或多个方面涉及呈文件格式的视频内容的存储。举例来说,本发明的技术可改进HEVC及分层HEVC(L-HEVC,也简称为LHEVC)文件格式的图块的分组的处置。

在一个实例中,本发明描述一种用于存储视频数据的方法,所述方法包括:通过文件产生装置,接收位流,所述位流包含形成所述视频数据的经编码图片的表示的位序列,所述视频数据的所述图片包含当前图片,所述当前图片经分割成多个图块,所述多个图块中的每一相应图块为相应矩形区;通过所述文件产生装置,产生文件中的网络抽象层(NAL)单元映射项方块,所述NAL单元映射项方块使所述位流的NAL单元与图块集相关联,所述图块集包含所述当前图片经分割成的所述多个图块中的两个或多于两个图块,由所述图块集中的所述图块覆盖的所述当前图片的区的形状并非矩形;及通过所述文件产生装置,产生所述文件中的图块集群组项,所述图块集群组项包含识别所述图块集的一群组识别符语法元素,所述图块集群组项包含水平偏移语法元素、垂直偏移语法元素、宽度语法元素及高度语法元素,所述水平偏移语法元素规定覆盖所述图块集中的图块的最小矩形区的左上方像素的水平偏移,所述垂直偏移语法元素规定覆盖所述图块集中的图块的所述最小矩形区的所述左上方像素的垂直偏移,所述宽度语法元素规定覆盖所述图块集中的所述图块的所述最小矩形区的宽度,且所述高度语法元素规定覆盖所述图块集中的所述图块的所述最小矩形区的高度。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于高通股份有限公司,未经高通股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201780018727.4/2.html,转载请声明来源钻瓜专利网。

同类专利
  • 一种检索媒体数据的方法、设备及可读存储介质-201980031271.4
  • T.斯托克哈默 - 高通股份有限公司
  • 2019-05-09 - 2023-05-30 - H04N21/854
  • 一种用于检索媒体数据的示例设备,包括:被配置为存储媒体数据的存储器;以及在电路中实现的一个或多个处理器,其被配置为:确定用于媒体数据的呈现的清单文件包括指定媒体数据不可用但是分段时间线可以被延长的该呈现的时间段的数据;检索包括具有在该时间段之前的呈现时间的媒体数据的、该呈现的第一组分段;检索包括具有该时间段之后的呈现时间的媒体数据的、该呈现的第二组分段;响应于确定清单文件包括指定时间段的数据:省略对具有在该时间段期间的呈现时间的媒体数据的检索;并且根据该确定来延长分段时间线。
  • 用于针对视频编码的非二进制简档约束信令的方法和装置-201980060905.9
  • M·汉努克塞拉 - 诺基亚技术有限公司
  • 2019-09-10 - 2023-04-25 - H04N21/854
  • 一种方法、装置和计算机程序产品在图像或视频比特流中提供非二进制简档约束,以使得解码器能够确定解码器是否可以在无需完全解码比特流的情况下解码比特流。该方法、装置和计算机程序产品将一个或多个源图片编码到比特流中。该编码由一个或多个编解码属性来表征(20)。该方法、装置和计算机程序产品进一步将指示比特流的一个或多个编解码属性的语法结构编码到比特流中或与比特流一起编码(22)。语法结构包括第一部分和第二部分,该第一部分包括在一个或多个预定义比特位置处具有以比特为单位的一个或多个预定义长度的一个或多个固定语法元素,该第二部分包括一个或多个条件语法元素。(多个)条件语法元素的存在基于与一个或多个固定元素相关联的一个或多个值而被条件化。
  • 用于生成图像数据流的装置和方法-201980054612.X
  • W·H·A·布鲁斯;B·克龙 - 皇家飞利浦有限公司
  • 2019-06-17 - 2023-03-21 - H04N21/854
  • 一种用于生成表示场景视图的图像数据流的装置,例如用于虚拟现实的应用。所述装置包括接收器(203),所述接收器接收注视指示,所述注视指示指示观看者的头部姿态和相对眼睛姿态两者。所述头部姿态包括头部位置,并且所述相对眼睛姿态指示相对于所述头部姿态的眼睛姿态。确定器(205)确定场景中与注视指示相对应的通常是小/窄的视觉关注区域。具体地,可以识别注视点周围的区域。生成器(209)生成图像数据流以包括针对场景的图像数据,所述图像数据具有针对视觉关注区域比视觉关注区域之外具有更高的质量水平/数据率。
  • 用于无声视频的AI辅助音效生成-202180028673.6
  • S.克里什纳默蒂 - 索尼互动娱乐股份有限公司
  • 2021-04-09 - 2022-12-02 - H04N21/854
  • 针对视觉输入的音效推荐通过训练机器学习模型生成,所述机器学习模型从参考视觉、正音频信号和负音频信号中学习粗粒度和细粒度视听相关性。经训练的声音推荐网络被配置为输出音频嵌入和视觉嵌入并且使用所述音频嵌入和所述视觉嵌入来计算图像帧或视频片段与从数据库中检索的一个或多个音频片段之间的相关性距离。对所述数据库中的所述一个或多个音频片段的所述相关性距离进行排序,并且确定与所排序的音频相关性距离具有最接近相关性距离的一个或多个音频片段。将具有所述最接近音频相关性距离的所述音频片段应用于输入图像帧或视频片段。
  • 使用基于云的语音结合的定制视频制作服务提供系统-202080092879.0
  • 张衡淳 - 张衡淳
  • 2020-12-23 - 2022-08-26 - H04N21/854
  • 提供一种使用基于云的语音结合的定制视频制作服务提供系统,包括:用户终端,其接收以语音形式输入的用户话语并上传,从至少一种类别中选择任意一个类别,选择包括图像或视频的内容,选择字幕或背景音乐,播放包括内容及上传的语音、字幕或背景音乐的定制视频;以及定制视频制作服务提供服务器,其包括数据库化部、上传部、转换部、提供部、生成部,数据库化部对至少一种类别的文本、图像、视频及背景音乐进行分类及存储,上传部接收从用户终端上传的与用户话语相对应的语音数据的上传,转换部利用STT(语音转文本)将上传的语音数据转换为文本数据并存储,当用户终端从至少一个类别中选择了任意一个类别时,提供部将预先映射并存储在所选类别中的图像或视频提供给用户终端,当用户终端选择了字幕或背景音乐并接收了字幕数据或所选择的背景音乐时,生成部生成包括内容及上传的语音、字幕或背景音乐的定制视频。
  • 用于视频编码和视频解码的方法、装置和计算机程序产品-202080091336.7
  • M·汉努克塞拉;E·阿克苏;K·坎玛奇·斯雷德哈 - 诺基亚技术有限公司
  • 2020-12-17 - 2022-08-19 - H04N21/854
  • 实施例涉及一种方法,该方法用于在容器文件中写入两个或更多个子图片轨道;在容器文件中写入基本轨道,该基本轨道旨在被解析为视频比特流;在基本轨道中指示子图片布局;在容器文件中写入样本组描述条目,该样本组描述条目指示针对子图片布局中每个子图片位置的第一子图片轨道或一组子图片轨道,其中第一子图片轨道包括针对相应子图片位置的子图片序列,并且其中该组子图片轨道中的任何轨道包括针对相应子图片位置的有效子图片序列;以及在容器文件中指示基本轨道的样本,样本组描述条目旨在被用于针对该基本轨道的样本重建视频比特流。本实施例还涉及一种解析方法、以及一种用于实现该写入方法和解析方法的技术设备。
  • 检索媒体数据的方法、设备、存储介质-201980031317.2
  • T.斯托克哈默 - 高通股份有限公司
  • 2019-05-09 - 2022-08-09 - H04N21/854
  • 一种用于检索媒体数据的示例设备包括:被配置为存储媒体数据的存储器;以及在电路中实现的一个或多个处理器,其被配置为:检索媒体数据的呈现的第一分段的至少一部分,所述第一分段的至少一部分包括指示所述第一分段包括缺失部分的数据,所述缺失部分表示媒体数据不可用但分段时间线可以被延长的时间段;检索具有在所述缺失部分之后的呈现时间的第二分段的媒体数据;根据所述第一分段的至少一部分的数据来延长所述分段时间线;以及根据所延长的分段时间线输出所述第二分段的媒体数据。
  • 信息处理装置、信息处理方法和程序-202080086211.5
  • 加茂学 - 索尼集团公司
  • 2020-11-13 - 2022-07-26 - H04N21/854
  • 例如,在诸如比赛之类其中与其他人进行比较重要的竞赛中,存在同时看到整个竞赛的动作和每个选手的动作之间的关系的需求。为此,一种信息处理装置包括:内容生成单元,所述内容生成单元通过组合由第一成像设备捕捉的第一图像和由第一成像设备或其他成像设备捕捉的第二图像来生成显示内容,所述第二图像将第一图像中的被摄体的一部分作为被摄体。
  • 数据处理设备及其控制方法和程序-202080081055.3
  • 强矢亨 - 佳能株式会社
  • 2020-11-09 - 2022-07-08 - H04N21/854
  • 根据本发明的数据处理设备分析包括多个内容的预定格式的文件,并获取所述多个内容和表示所述多个内容之间的关系的关系信息;存储所获取的多个内容;生成播放列表,所述播放列表描述用于分别获取所存储的多个内容的获取信息;以及将所述播放列表发送到外部设备,并使用包括在所述播放列表中的所述获取信息来向所述外部设备发送所述外部设备请求的内容。
  • 内容发布服务器、内容发布方法以及内容发布系统-201880055631.X
  • 川上量生;齐藤宽明;小岛尚 - 多玩国株式会社
  • 2018-08-23 - 2022-04-12 - H04N21/854
  • 内容发布服务器(111)配备了接收从实况内容发布者使用的发布者终端(121)通过网络传送的实况内容的通信单元(112)、以及已接收的实况内容中,指定与其它内容重叠再现用的区域用的指定单元(115)、选择在已指定的区域再现用的其它内容的选择单元(116)、在实况内容中,使选择单元(116)所选择的其它内容与指定单元(115)指定的区域重叠,生成发布内容的控制单元(113),通信单元(112)通过网络NW向观看者终端(131)发布想要发布的内容。
  • 用于将全景图像封装在文件中的方法和设备-202080046446.1
  • 弗雷德里克·梅兹;弗兰克·德诺奥 - 佳能株式会社
  • 2020-06-10 - 2022-02-25 - H04N21/854
  • 本发明涉及将媒体数据封装在文件中的方法,其中该方法包括:对参考图像集合进行编码;生成图像项集合以描述所述参考图像集合;基于所述参考图像集合生成描述与全景相对应的派生图像的图像项;生成将描述所述派生图像的所述图像项与所述图像项集合相关联的关联信息;生成包含所述全景的参数的参数数据结构,所述参数数据结构与描述所述派生图像的所述图像项相关联;以及将所述图像项集合、描述所述派生图像的所述图像项以及所述关联信息嵌入所述文件中。
  • 在使用MIME类型参数的网络视频流式传输中发信重要视频信息-201880019398.X
  • 王业奎;托马斯·斯托克哈默 - 高通股份有限公司
  • 2018-03-27 - 2022-02-01 - H04N21/854
  • 本发明涉及一种用于检索媒体数据的实例装置,所述实例装置包含一或多个处理器,其经配置以:检索清单文件,所述清单文件指定针对媒体呈现的至少一个表示的数据,其中所述清单文件包含指定用于所述至少一个表示的一或多个编解码器的数据;从所述清单文件提取指定所述一或多个编解码器的所述数据,所述数据包含表示所述至少一个表示的播放轨的样本项类型码的第一元素及表示用于所述播放轨的受约束方案的受约束方案类型码的第二元素,其中所述第一元素表示使用所述受约束方案的所述样本项类型码;及基于所述第一元素及所述第二元素检索所述至少一个表示的所述媒体数据。
  • 用于处理媒体数据及产生位流的方法、装置及存储媒体-201880020635.4
  • 托马斯·斯托克哈默 - 高通股份有限公司
  • 2018-04-03 - 2021-12-17 - H04N21/854
  • 本发明提供一种用于处理媒体数据的实例装置,其经配置以进行以下操作:剖析包含所述媒体数据的位流,所述位流是根据共同媒体应用格式CMAF而格式化;在所述剖析期间检测所述位流的CMAF播放轨文件的文件类型FTYP值;确定所述CMAF播放轨文件的CMAF标头以所述FTYP值开始;及处理在所述CMAF播放轨文件的所述CMAF标头之后的一或多个CMAF片段。所述装置可另外经配置以进行以下操作:检测所述位流中的一或多个区段类型STYP值;确定所述一或多个STYP值中的每一者对应于所述CMAF片段中的相应者的开始;及处理从所述对应STYP值开始的所述CMAF片段中的每一者。
  • 直播传输系统以及直播传输方法-201980093949.1
  • 林范和 - 巴鲁斯株式会社
  • 2019-03-13 - 2021-12-07 - H04N21/854
  • 在对直播影像同时进行传输的多个直播会场中,提高参与者全员的融入感。直播传输系统1具有反应收集部4和呈现效果控制部5,针对场所不同的多个直播会场A~C同时传输直播影像。反应收集部4针对每个直播会场实时地从直播会场内的检测设备7收集在直播会场A~C中欣赏直播影像的参与者的反应。呈现效果控制部5基于由反应收集部4收集到的每个直播会场的参与者的反应,对每个直播会场独立地决定在直播会场A~C中应呈现的呈现效果。
  • 自动的音频-视频内容生成-202080030878.3
  • 克里斯多夫·沃谢 - 索可立谱公司
  • 2020-04-21 - 2021-12-07 - H04N21/854
  • 用于生成媒体内容的系统和方法包括处理音频文件以确定所述音频文件的一个或更多个参数。基于与所述音频文件相关联的皮肤,来确定对应于所述音频文件的一个或更多个参数的一个或更多个媒体效果。对媒体文件施加所述一个或更多个媒体效果以生成经修改的媒体文件,其中,所述媒体文件不包括所述音频文件。生成包括所述音频文件与所述经修改的媒体文件的组合的音频‑视频文件。
  • 产生、处理用于存储视频内容的文件的方法、装置及存储介质-201780030887.0
  • 王业奎 - 高通股份有限公司
  • 2017-05-23 - 2021-09-21 - H04N21/854
  • 本发明涉及一种装置,其使位流的经译码视频序列的第一序列结束EOS网络抽象层层NAL单元包含在文件的第一轨中。所述第一EOS NAL单元在所述经译码视频序列的第一存取单元中。所述装置也使所述经译码视频序列的第二EOS NAL单元包含在所述文件的第二轨中。所述第二EOS NAL单元在所述经译码视频序列的第二存取单元中,所述第二EOS NAL单元不同于所述第一EOS NAL单元。所述装置可针对位流结束EOB NAL单元执行类似动作。
  • 在高效率视频写码及分层高效率视频写码文件格式的图块分组的改进-201780018727.4
  • 伏努·亨利;王业奎 - 高通股份有限公司
  • 2017-03-28 - 2021-05-14 - H04N21/854
  • 本发明揭示一种装置,所述装置产生文件中的网络抽象层NAL单元映射项方块。所述NAL单元映射项方块使NAL单元与图块集相关联,所述图块集包含当前图片经分割成的多个图块中的两个或多于两个图块。由所述图块集覆盖的所述当前图片的区可为非矩形的。另外,所述装置产生所述文件中的图块集群组项。所述图块集群组项包含水平偏移、垂直偏移、宽度及高度。所述水平偏移规定覆盖所述图块集中的图块的最小矩形区的左上方像素的水平偏移。所述垂直偏移规定所述最小矩形区的所述左上方像素的垂直偏移。所述宽度规定所述最小矩形区的宽度。所述高度规定所述最小矩形区的高度。
  • 处理视频数据的方法、设备及计算机可读媒体-201880005215.9
  • 王业魁 - 高通股份有限公司
  • 2018-01-05 - 2021-05-14 - H04N21/854
  • 本发明提供用于处理视频数据且处理一或多个媒体格式文件的技术及系统。举例来说,可获得且处理视频数据,以产生媒体格式文件,所述媒体格式文件包含所述视频数据及与所述视频数据相关联的限制方案信息框。所述限制方案信息框包含多个方案类型框,所述多个方案类型框识别用于处理所述视频数据所需的多个限制方案类型。在另一实例中,获得包含所述视频数据及与所述视频数据相关联的所述限制方案信息框的所述媒体格式文件。可剖析所述媒体格式文件,且可根据由所述多个方案类型框识别的所述多个限制方案类型而处理所述视频数据。
  • 一种检索视频数据的方法、装置、设备及可读存储媒体-201780028460.7
  • 王业奎 - 高通股份有限公司
  • 2017-05-24 - 2021-02-02 - H04N21/854
  • 在一个实例中,一种用于检索视频数据的装置包含经配置以接收数据的一或多个处理器,所述数据描述视频位流的样本的样本条目类型,所述样本条目类型为‘hev1’或‘hev2’中的一个,其中所述样本包括根据高效视频译码HEVC或分层式HEVC L‑HEVC中的一个编码的视频数据,且其中包含视频数据的一或多个其它样本按解码次序在所述视频位流中的所述样本之前,且响应于所述样本条目类型为‘hev1’或‘hev2’且所述样本包括根据HEVC或L‑HEVC中的一个编码的所述视频数据,检索所述样本以使用所述样本执行随机存取,而不检索在所述样本之前的所述一或多个其它样本中的任一个的所述视频数据,且不检索按解码次序的视频位流的任何前述样本的参数集。
  • 照相机系统-201980031627.4
  • 绵引隆一;新田智昭 - 株式会社CIAO
  • 2019-05-16 - 2021-01-05 - H04N21/854
  • 提供照相机系统,能从分别设置在多个据点的照相机中,根据气象信息容易地确定照相机并确认其图像。具有:气象信息获取装置28,获取与气象相关而被提供的气象信息即包含与对象地区相关的信息的气象信息;照相机2,分别设置在多个据点;照相机设置信息存储装置23,存储与设置了照相机2的各据点的地点有关的信息;图像数据存储装置21,将通过各照相机2拍摄的图像作为动态图像存储;照相机确定装置29,基于通过气象信息获取装置28获取的气象信息,从被存储到照相机设置信息存储装置23的、与设置了照相机2的各据点的地点有关的信息中,确定设置在对象地区的照相机2;动态图像提供装置22,提供通过照相机确定装置29来确定的照相机2的动态图像。
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

400-8765-105周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top