[发明专利]三维内容生成装置及其三维内容生成方法有效
| 申请号： | 201680041402.3 | 申请日： | 2016-06-21 |
| 公开（公告）号： | CN107852533B | 公开（公告）日： | 2022-09-09 |
| 发明（设计）人： | 郑载润;亚历山大·利莫诺夫 | 申请（专利权）人： | 三星电子株式会社 |
| 主分类号： | H04N21/81 | 分类号： | H04N21/81;H04N21/854;G06Q50/10 |
| 代理公司： | 北京市立方律师事务所 11330 | 代理人： | 李娜 |
| 地址： | 韩国*** | 国省代码： | 暂无信息 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 一种三维(3D)内容生成装置，包括：输入器，被配置为接收从不同位置采集到的对象的多幅图像；检测器，被配置为从所述多幅图像中的每幅图像中识别所述对象并且检测所述对象的预先确定的特征点；图形成器，被配置为提取检测到的特征点的3D位置信息，并且被配置为基于提取出的所述特征点的所述3D位置信息来形成针对所述对象的表面的至少一个深度图；以及内容生成器，被配置为使用所述至少一个深度图和所述多幅图像来生成所述对象的3D内容。 | ||
| 搜索关键词： | 三维 内容 生成 装置 及其 方法 | ||
【主权项】：
一种三维(3D)内容生成装置，包括：输入器，被配置为接收对象的多幅图像，所述多幅图像被采集自不同位置；检测器，被配置为从所述多幅图像中的每幅图像中识别所述对象并且检测所述对象的特征点；图形成器，被配置为提取检测到的特征点的3D位置信息，并且被配置为基于提取出的所述特征点的所述3D位置信息来形成针对所述对象的表面的至少一个深度图；以及内容生成器，被配置为基于所述至少一个深度图和所述多幅图像来生成所述对象的3D内容。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于三星电子株式会社，未经三星电子株式会社许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201680041402.3/，转载请声明来源钻瓜专利网。
- 上一篇：用于视频编码的方法和装置
- 下一篇：在广播流和单播流之间转换
- 同类专利
- 用于由流式媒体数据定义的虚拟交互场景中的虚拟相机的对象碰撞数据-202280018913.9
- I·布阿齐齐;T·施托克哈默 - 高通股份有限公司
- 2022-03-09 - 2023-10-20 - H04N21/81
- 一种用于检索媒体数据的示例设备包括：存储器，其被配置为存储媒体数据；以及一个或多个处理器，其在电路中实现并且被配置为执行呈现引擎，呈现引擎被配置为：接收流式媒体数据，所述流式媒体数据表示包括至少一个虚拟固体对象的虚拟三维场景；接收表示所述至少一个虚拟固体对象的边界的对象碰撞数据；从用户接收相机移动数据，所述相机移动数据请求所述虚拟相机移动穿过所述至少一个虚拟固体对象；以及使用对象碰撞数据来防止所述虚拟相机响应于相机移动数据而穿越至少一个虚拟固体对象。
- 流式传输的媒体数据定义的虚拟交互场景中的虚拟相机的相机控制数据-202280019095.4
- I·布阿兹兹;T·斯托克哈默 - 高通股份有限公司
- 2022-03-09 - 2023-10-20 - H04N21/81
- 一种用于检索媒体数据的示例设备包括：存储器，被配置为存储媒体数据；以及一个或多个处理器，在电路中实施并被配置为执行呈现引擎，该呈现引擎被配置为：接收表示包括至少一个虚拟实体对象的虚拟三维场景的流式传输的媒体数据；接收三维场景的相机控制数据，该相机控制数据包括定义阻止虚拟相机穿过至少一个虚拟实体对象的限制的数据；接收请求虚拟相机移动通过至少一个虚拟实体对象的来自用户的相机移动数据；以及使用相机控制数据，阻止虚拟相机响应于相机移动数据穿过至少一个虚拟实体对象。
- 使用渲染引擎的沉浸式技术媒体格式（ITMF）规范的映射架构-202280018049.2
- 罗伊特·阿比什克;阿芮亚娜·汉斯 - 腾讯美国有限责任公司
- 2022-12-15 - 2023-10-17 - H04N21/81
- 本申请提供一种方法，包括：解析场景文件以提取相关场景文件数据；将所述相关场景文件数据发送至转换器；通过所述转换器将所述相关场景文件数据转化成与相应渲染引擎兼容的格式；使用所述相应渲染引擎将经转化的场景文件数据映射到场景表示中，其中，所述场景表示与沉浸式技术媒体格式(ITMF)兼容。
- 用于基于视觉体积视频（V3C）媒体和基于几何的点云（G-PCC）媒体的流式传输的MMT信令-202280012530.0
- 阿赫麦德·哈姆扎;斯里尼瓦斯·古杜马苏 - 交互数字专利控股公司
- 2022-01-05 - 2023-09-29 - H04N21/81
- 本文描述了用于基于视觉体积视频的编码(V3C)媒体和基于几何的点云编码(G‑PCC)媒体的流式传输的方法、系统和装置。一种在接收设备中实现的方法可包括接收以下各项中的一者或多者：包括可用于从发送设备被流式传输的媒体资产的列表的第一消息，或者分别描述媒体资产的一个或多个消息。该方法还可包括发送第二消息，该第二消息指示对待从发送设备被流式传输的媒体资产的子集的请求。媒体资产的所请求的子集可基于接收设备的视口来确定。该方法还可包括接收运动图像专家组(MPEG)媒体传输协议(MMTP)分组，以及处理这些分组以恢复媒体资产的所请求的子集的至少一部分。
- 通过VR广播流的远程呈现-202280010265.2
- B·坎德洛尔;A·戈德堡;F·安斯菲尔德;G·克利夫特;L·皮内达 - 索尼集团公司
- 2022-08-05 - 2023-09-15 - H04N21/81
- 描述了用于在鲁棒地递送下一代广播电视服务方面扩展和/或改进高级电视系统委员会(ATSC)3.0电视协议的技术。通过空中(OTA)虚拟现实(VR)广播流来提供远程呈现。
- 多向视频的自适应编码和流式传输方法、系统和存储介质-201980078396.2
- X·杨;A·图拉皮斯;张大中;袁航;吴锡荣;J·H·金;翟杰夫;陈鸣;周小松 - 苹果公司
- 2019-11-07 - 2023-07-07 - H04N21/81
- 在通信应用中，发射器处的聚合源图像数据超过在接收器处显示视口的渲染所需的数据。改进的流式传输技术包括估计视口在未来时间的位置。根据此类技术，视口可表示未来时间将显示的来自多向视频的图像的一部分，并且可标识视口估计将位于其中的该图像的图块。在这些技术中，可在第一服务层请求视口估计将位于其中的图块的图像数据，并且可在低于第一服务层的第二服务层请求视口未被估计位于其中的另一图块。
- 显示设备及图像识别结果显示方法-202180060814.2
- 高斯太;韩洁;王光强;付延松 - 聚好看科技股份有限公司
- 2021-05-19 - 2023-06-23 - H04N21/81
- 本申请公开了显示设备及图像识别结果显示方法，当显示设备接收到输入的获取显示内容关联信息的指令时；接收输入的指令；根据所述指令截取视频播放窗口中的目标图像以识别所述目标图像中的人物；在视频播放窗口中继续播放视频，并在视频窗口上方的第一图层中显示识别出的所述人物对应的人物名称。这样，便可以保证将足够丰富的识别结果展示给用户。
- 用于将图像封装在文件中的方法和装置-201980023648.1
- 内尔·奥德拉奥果;弗雷德里克·梅兹;弗兰克·德诺奥;赫夫·鲁伦;高久雅彦 - 佳能株式会社
- 2019-04-04 - 2023-06-13 - H04N21/81
- 本发明涉及一种用于将图像封装在文件中的方法，其中所述方法包括：基于图像的拍摄模式来确定分组类型；生成将图像描述为组的分组数据结构，所述分组数据结构包括组的图像的图像标识符；以及将所述分组数据结构、所述分组类型和所述图像嵌入在文件中。
- 在消息收发系统内将广告插入视频中-202180066992.6
- 大卫·迈克尔·霍恩斯比;杰弗里·凯尔;钦梅·隆卡尔;王智民;伊恩·安东尼·韦尔曼;哈利勒·查托 - 斯纳普公司
- 2021-09-29 - 2023-06-06 - H04N21/81
- 本公开内容的各方面涉及用于将广告插入视频中的系统和方法，该系统包括存储程序的计算机可读存储介质。程序和方法使得：接收播放视频的请求，该视频包括由断点分开的多个镜头，多个镜头中的每个镜头对应于没有剪辑或转场的连续的一系列视频帧；响应于接收到请求，发起从多个镜头中的选择的镜头对视频的回放；接收在选择的镜头之后的断点处呈现广告的指示；响应于接收到指示，确定自发起视频的回放起已经经过了第一阈值时间量；以及基于确定在选择的镜头之后的断点处插入广告。
- 用于管理媒体项目的音频的用户界面-202180053640.7
- C·J·桑德斯;D·S·朴 - 苹果公司
- 2021-08-20 - 2023-05-30 - H04N21/81
- 本公开总体涉及根据一些实施方案的用于使用计算机系统传输音频的技术和用户界面。
- 用于向不同用户显示不同内容的方法、电子设备和介质-202080067776.9
- 金承煜;N·V·斯卡佩尔;F·巴辛德阿鲁乔席尔瓦 - 苹果公司
- 2020-07-07 - 2023-05-23 - H04N21/81
- 在一个实施方式中，一种操作透镜显示器的方法由包括处理器、非暂态存储器、图像传感器和透镜显示器的设备执行。该方法包括：经由该透镜显示器在第一用户的水平角度下显示第一内容，并且在第二用户的水平角度下显示不同于该第一内容的第二内容。该方法还包括：经由该透镜显示器在该第一用户的第二水平角度下显示该第一内容并且在该第二用户的第二水平角度下显示该第二内容。
- 用于全向视频的等待时间报告方法和系统-201980031487.0
- 贺勇;叶艳;阿赫麦德·哈姆扎 - VID拓展公司
- 2019-03-20 - 2023-05-05 - H04N21/81
- 本文描述的系统和方法提供了360度视频的渲染和渲染的质量监视，其中视频在不同区域中具有带有不同质量水平的多个表示。在示例性方法中，客户端设备跟踪视口相对于360度视频的位置，且将所述表示的选定集合渲染到所述视口。客户端基于视口位置自适应地添加表示并从所选集合中移除表示。客户端还测量并报告视口切换等待时间。在一些实施例中，视口切换的等待时间是可比较质量的视口切换等待时间，其表示在视口切换之后返回到与切换前视口质量相当的质量所花费的时间。
- 用于虚拟现实应用的音频传递优化-201880080196.6
- 阿德里安·姆塔萨;哈拉尔德·福克斯;贝恩德·切尔汗;珍·普洛斯提斯;马泰奥·阿涅利;英戈·霍夫曼 - 弗劳恩霍夫应用研究促进协会
- 2018-10-11 - 2023-02-28 - H04N21/81
- 公开了用于虚拟现实VR、增强现实AR、混合现实MR或360度视频环境的技术、系统、方法和指令。在一个示例中，系统(102)包括至少一个媒体视频解码器，被配置为解码来自视频流的视频信号，以向用户表示VR、AR、MR或360度视频环境场景。系统包括至少一个音频解码器(104)，被配置为从至少一个音频流(106)中解码音频信号(108)。系统(102)被配置为至少基于用户的当前视口和/或头部取向和/或移动数据和/或交互元数据和/或虚拟位置数据(110)，向服务器(120)请求(112)至少一个音频流(106)和/或音频流的一个音频元素和/或一个适应集。
- 用于编码或解码表示3D场景的数据的方法、设备或介质-201980034571.8
- J.弗勒罗;B.丘珀;T.塔皮;F.图多尔 - 交互数字VC控股公司
- 2019-03-27 - 2023-02-21 - H04N21/81
- 编码/解码表示3D场景的数据的方法和设备。将表示根据第一视点可见的3D场景的纹理的第一数据编码在第一轨道中。这些数据被布置在第一帧的第一图块中；将表示与3D场景的点相关联的深度的第二数据编码在第二轨道中。他们被布置第二帧的第二图块中，第二图块的总数量大于第一图块的总数量；并且进一步将用于从至少第一轨道和至少第二轨道的至少一部分提取第一数据和第二数据中的至少一部分的指令编码到一个或多个第三轨道中。
- 三维内容生成装置及其三维内容生成方法-201680041402.3
- 郑载润;亚历山大·利莫诺夫 - 三星电子株式会社
- 2016-06-21 - 2022-09-09 - H04N21/81
- 一种三维(3D)内容生成装置，包括：输入器，被配置为接收从不同位置采集到的对象的多幅图像；检测器，被配置为从所述多幅图像中的每幅图像中识别所述对象并且检测所述对象的预先确定的特征点；图形成器，被配置为提取检测到的特征点的3D位置信息，并且被配置为基于提取出的所述特征点的所述3D位置信息来形成针对所述对象的表面的至少一个深度图；以及内容生成器，被配置为使用所述至少一个深度图和所述多幅图像来生成所述对象的3D内容。
- 容积媒体处理方法和装置-202080094057.6
- 黄成;白雅贤 - 中兴通讯股份有限公司
- 2020-06-24 - 2022-09-02 - H04N21/81
- 本文描述了用于处理容积媒体数据的方法、系统和装置。处理容积媒体的一个示例方法如下：从媒体呈现描述(MPD)文件中确定与容积媒体的预选相对应的一个或多个预选元素，使用所述一个或多个预选元素访问所述容积媒体的一个或多个图集数据组件和相关联的视频编码组件；以及从所述一个或多个图集数据组件和所述相关联的视频编码组件重建所述容积媒体。
- 非遮挡视频叠加-202080083613.X
- E.埃尔比塞努-特纳;A.加拉绍夫;A.邱;N.韦根 - 谷歌有限责任公司
- 2020-07-29 - 2022-07-08 - H04N21/81
- 提供了一种方法、系统和计算机介质，用于识别视频帧中的排除区域，在指定的持续时间或指定的帧的数量内聚合那些排除区域，定义叠加的内容符合包含条件的包含区域，以及提供叠加的内容以包含在包含区域中。排除区域可以包括检测到重要特征的区域，诸如文本、人类特征、来自选定对象类别的集合的对象或移动对象。
- 增强区域取向包封及视区独立高效视频译码媒体配置文件-201880044866.9
- 王业奎;托马斯·斯托克哈默 - 高通股份有限公司
- 2018-07-10 - 2022-02-15 - H04N21/81
- 本发明提供一种用于处理媒体内容的装置，其可经配置以：从视频文件内的区域取向包封框获得指示媒体内容的第一经包封区域的第一大小及第一位置的第一值集合，及指示所述媒体内容的第二经包封区域的第二大小及第二位置的第二值集合，其中所述第一值集合及所述第二值集合呈解包封的左上角明度样本的相对单位；解包封所述第一经包封区域以产生第一解包封区域；从所述第一解包封区域形成第一经投影区域；解包封所述第二经包封区域以产生第二解包封区域；及从所述第二解包封区域形成第二经投影区域，所述第二经投影区域不同于所述第一经投影区域。
- 基于视频的点云流-202080044866.6
- 阿赫麦德·哈姆扎;贺勇 - VID拓展公司
- 2020-05-21 - 2022-02-08 - H04N21/81
- 本文公开了与一个或多个ISO基础媒体文件格式(ISOBMFF)容器文件中的基于视频的点云流相关的系统、方法和工具。提供了点云数据的容器格式，并且该容器格式至少指示该点云的3D区域与一个或多个基于视频的点云压缩(V‑PCC)轨之间的关系。该V‑PCC轨可被分组在一起并且与该3D区域链接以允许对该3D区域的空间访问。
- 包含用于视频译码的子图片位流的视频内容的信令传输-201880019591.3
- 王业奎 - 高通股份有限公司
- 2018-03-22 - 2021-10-22 - H04N21/81
- 在各种实施方案中，提供对ISOBMFF的修改及/或添加以处理视频数据。从存储器获得多个子图片位流，每一子图片位流包含所述视频数据的空间部分且每一子图片位流独立地经译码。在至少一个文件中，分别存储所述多个子图片位流作为多个子图片播放轨。将描述所述多个子图片播放轨的元数据存储于根据文件格式的媒体文件内的播放轨逻辑框中。提供包含描述所述多个子图片播放轨的所述元数据的子图片基本播放轨。
- 递送360°视频流的系统和方法-201780029818.8
- C.周 - 维斯比特股份有限公司
- 2017-04-07 - 2021-10-15 - H04N21/81
- 本公开涉及递送360°视频流的系统和方法，其可以用在虚拟现实和增强现实内容中。即，360°视频流可以被分割成多个视频流，每个视频流对应于观看体或观看球体的一部分。另外，原始360°视频流可以被下采样到较低分辨率360°视频流。对于给定的用户视角，多个视频流中的一个或多个可以被认为是活跃流并且连接到用户接口或显示器以用于数据下载。在这种情况下，用户接口可以连接到与用户视角相对应的至少一个高分辨率视频流以及低分辨率360°视频流。
- 处理点云-202080013137.4
- C·盖德;J·里卡德;J·拉奇 - 交互数字VC控股公司
- 2020-01-10 - 2021-10-01 - H04N21/81
- 至少一个实施例涉及一种用于传输PLRM元数据的方法，该方法去除了PLRM元数据与占用图和块到面片信息BlockToPatch之间的依赖性。
- 改进虚拟现实媒体内容的流传输的方法、装置和计算机程序-201780032232.7
- 内尔·奥德拉奥果;弗兰克·德诺奥;乔纳森·泰奎特 - 佳能株式会社
- 2017-05-18 - 2021-09-17 - H04N21/81
- 本发明涉及从服务器向客户端流传输表示场景的宽视图的捕获投影的媒体数据，流传输的媒体数据使得客户端能够在3D显示面上渲染宽视图、或者根据不同视点来在显示面上渲染宽视图，该渲染包括媒体数据的渲染投影。在将包括与媒体数据有关的信息的描述文件发送至客户端之后，从客户端接收用以基于该描述文件来请求媒体数据流的请求消息，并且将与所请求的媒体数据流相对应的媒体数据发送至客户端，其中该信息包括与用于产生媒体数据的宽视图的捕获有关的描述性信息和与该媒体数据的空间分区的质量级别有关的描述性信息。
- 分层的增强型娱乐体验-201880011840.4
- A·尼南;N·曼明;T·Y·布朗 - 杜比实验室特许公司
- 2018-04-10 - 2021-09-03 - H04N21/81
- 访问描述表示于一个或多个多视角未分层图像中的三维(3D)图像空间中的视觉对象的空间定位的空间信息。基于所述空间信息，从所述一个或多个多视角未分层图像生成影院图像层和一个或多个设备图像层。将包括所述影院图像层和所述设备图像层的多层多视角视频信号发送至下游设备以供渲染。
- 图像处理装置、图像处理方法、程序以及显示装置-201980075004.7
- 菅野尚子 - 索尼集团公司
- 2019-11-06 - 2021-07-23 - H04N21/81
- 一种图像处理装置包括电路，该电路被配置成对根据在不同时间处从多个视点捕获的多个视点图像生成的多个3D模型中的至少一个3D模型执行效果处理。
- 包括本机广播者应用的接收器设备-201980076348.X
- G·克利夫特 - 索尼集团公司
- 2019-10-10 - 2021-06-29 - H04N21/81
- 接收装置包括存储电视接收器应用和本机应用的存储器。接收装置还包括处理器，该处理器被配置为由本机应用向电视接收器应用发送关于可用于显示的多个服务的查询命令；响应于查询命令，由本机应用从电视接收器应用接收查询响应消息，该查询响应消息至少包括第一参数，该第一参数指定可用于显示的多个相关联服务；以及由本机应用为第一参数中指示的每个服务提供视频表面。
- 配置和管理多种设备类型的内容指南的用户界面的技术-201980059325.8
- A·菲什曼;G·路易斯;W·欧文;L·托马斯;C·柴;L·德门斯马卡;B·吉德里;R·简 - 公共电视公司
- 2019-09-10 - 2021-04-30 - H04N21/81
- 描述了用于修改或更新用户界面的系统、方法和计算机可读介质。在一些示例中，系统、方法和计算机可读介质包括：经由操作者系统上的操作者控制台接收用于用户界面的模板的一个或多个输入，基于一个或多个输入生成用于用户界面的模板，以及基于模板为用户界面生成多个设计，其中多个设计中的每个设计都与界面简档相关联。
- 用于映射球形媒体内容项的计算机实现方法、系统及存储介质-201680067976.8
- 大卫·勇·约恩·皮奥;叶夫根尼·V·库扎亚克夫;陈建男 - 脸谱公司
- 2016-09-21 - 2021-01-26 - H04N21/81
- 系统、方法、以及非暂时性计算机可读介质可以获得从多个不同的位置捕获至少一个场景的球形媒体内容项。确定具有多个面的三维形状，每个面与相应的一组原始边界相关联。确定多个面中的一个或多个面的相应的一组扩展边界。将球形媒体内容项的相应部分映射至一个或多个面中的每一个，其中，球形媒体内容项的第一部分映射至具有一组扩展边界的第一面。
- 360度多视口系统-201980039766.1
- 帕西·萨卡里·奥亚拉 - PCMS控股公司
- 2019-04-17 - 2021-01-22 - H04N21/81
- 方法的一些实施例可以包括：接收指示沉浸式视频的哪个部分对应于在第一显示器上显示的沉浸式视频的第一视口的元数据；跟踪第二显示器相对于所述第一显示器的取向；基于所述元数据和所述第二显示器相对于所述第一显示器的取向，确定在时间和取向上相对于在所述第一显示器上显示的所述沉浸式视频同步的所述沉浸式视频的第二视口；以及在所述第二显示器上显示所述第二视口。
- 一种从音视频文件中选择音轨的方法及装置-201880093609.4
- 余艳辉;李昕 - 华为技术有限公司
- 2018-05-29 - 2021-01-05 - H04N21/81
- 本申请的实施例提供一种从音视频文件中选择音轨的方法，包括：终端从音视频文件的一个或多个音轨中选出一个或多个支持解码的音轨；终端从支持解码的一个或多个音轨中选择语言相匹配的音轨；在语言相匹配的多个音轨中，终端选择支持的音频格式为第一规格的音频格式；终端从第一规格的音频格式中，选择具备第一码率的音轨；终端根据选择的音轨播放所述音视频文件；其中，支持的音频格式中第一规格高于支持的音频格式中的第二规格；具备第一码率的音轨中的第一码率高于具备第二码率的音轨中的第二码率。
- 专利分类
- 内容再现系统、内容提供方法、内容再现装置、内容提供装置、内容再现程序和内容提供程序
- 内容记录系统、内容记录方法、内容记录设备和内容接收设备
- 内容服务系统、内容服务器、内容终端及内容服务方法
- 内容分发系统、内容分发装置、内容再生终端及内容分发方法
- 内容发布、内容获取的方法、内容发布装置及内容传播系统
- 内容提供装置、内容提供方法、内容再现装置、内容再现方法
- 内容传输设备、内容传输方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容发送设备、内容发送方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容再现装置、内容再现方法、内容再现程序及内容提供系统
- 内容记录装置、内容编辑装置、内容再生装置、内容记录方法、内容编辑方法、以及内容再生方法
