[发明专利]自动全光视频重新聚焦的音频事件检测在审
申请号: | 201610861719.3 | 申请日: | 2016-09-28 |
公开(公告)号: | CN106954121A | 公开(公告)日: | 2017-07-14 |
发明(设计)人: | P.赫利尔;Q.K.N.董;V.阿利;P.莱恩德克 | 申请(专利权)人: | 汤姆逊许可公司 |
主分类号: | H04R3/00 | 分类号: | H04R3/00;H04N5/225 |
代理公司: | 北京市柳沈律师事务所11105 | 代理人: | 吕晓章 |
地址: | 法国伊西*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 自动 视频 重新 聚焦 音频 事件 检测 | ||
技术领域
本公开一般涉及记录和广播技术,并且具体涉及使用具有重新聚焦特征的全光相机的广播。
背景技术
本章节目的在于向读者介绍技术的各个方面,并且帮助更好地理解所展示的各个实施例。因此,应当理解,这些陈述从这个角度来阅读,而不作为对现有技术的承认。
具有简单布置的典型的3D图像捕获设备捕获右眼图像和左眼图像。因此,这样的方法需要两个相机来增加最终产品的总体大小和质量。为了克服同时使用两个相机的负担,已经开发了使用单个全光相机、通过视差或者“多视角图像”能力捕获多个图像的技术。全光相机通过使用布置在成像平面处的柱状透镜阵列前面的单个透镜来捕获图像。在全光相机中,主透镜孔径在每个透镜状元件后面成像。从不同的透镜所捕获的多个子图像生成最终图像,其中每个透镜反射其前面的场景。
对透镜状阵列后面的图像进行数字化以获得数字全光图像。因此,每个子图像由对进入主孔径的光射线的路径进行编码的局部像素阵列来表示。对于大孔径,每个子图像的各个像素将在子图像中被点亮。对于小孔径,仅一个像素将被点亮。
近年来,除了全光相机的发展之外,作为整体的数字相机和数字电影摄像机的性能和功能由于技术的提高而独立地被增强。例如,诸如电荷耦合器件阵列(CCD)或者互补金属氧化物半导体阵列(CMOS)这样的一些固态图像传感器的使用已经极大地增强了使用这些相机的质量和容易性。具体地,在图像传感器中使用的像素结构的大小已经由于半导体器件处理技术的快速发展而进一步减小,从而实现了更大的分辨率。与成像技术的增强相结合的全光相机的发展如今使更大数量的像素和驱动器能够一起集成在图像传感器中,由此提供令人惊讶的结果。这样的发展能够增强观看快感并且提高所展示的图像的分辨率。然而,现有技术仍然缺乏在创建沉浸式观看体验中充分利用这些改进并且因此在整体上提高娱乐价值的设备和技术。
发明内容
提供一种全光相机和相关联的方法。在一个实施例中,该相机具有用于生成数字图像的传感器阵列。图像具有相关联的音频信号。传感器阵列被配置为捕获与默认的空间坐标相关联的数字图像,并且还被配置为接收来自处理器的控制输入,以基于在新的空间坐标处的事件的发生,将焦点从默认的空间坐标改变到新的空间坐标。
在另一个实施例中,相关联的方法包括:经由处理器接收来自全光相机的多个数字图像;经由处理器接收与图像相关联的多个音频信号;以及由处理器确定事件的发生,并且将焦点从默认的空间坐标改变到与事件的发生相关联的新的空间坐标。
附图说明
参照附图、借助于下面决不是限制性的实施例和执行示例,将更好地理解和例示本发明,附图中:
图1图示示出具有多个麦克风的分布式全光成像系统的框图;
图2图示根据图1的实施例的另一个框图,例示根据一个实施例的不同的所计算出的兴趣得分;
图3是示出如根据一个实施例的所估计的重新聚焦平面的框图;以及
图4是图示根据一个实施例的图像和相关联音频信号的传递的流程图。
在图1至图3中,所表示的方框仅仅是功能实体,其未必对应于物理上单独的实体。也就是说,它们能够开发为软件、硬件的形式或者实现在包括一个或多个处理器的一个或若干集成电路中。
在任何可能的情况下,在附图各处,将使用相同的标号来参考相同或相似的部件。
具体实施方式
应当理解,为了清楚地理解本发明,本发明的附图和描述已经简化以例示相关的元件,同时为了清楚的目的,消减了在典型的数字多媒体内容传递方法和系统中存在的许多其他元件。然而,因为这样的元件在本领域中众所周知,所以这里不提供对这些元件的详细讨论。这里,本公开针对所有这样的变型和修改。
图1是示出全光成像系统100的一个实施例的例示。能够提供诸如体育场地110这样的允许比赛或音乐会的广播的场地。在该实施例中,如在130处所示,使用一个或多个全光相机进行广播。如所示那样,还能够在跨越场地110的某些期望位置处选择性地布置多个麦克风120。一般地,广播通常涉及音频和/或视频内容经由一个或多个的通信介质(主要是电子通信介质)分发给到分散的观众。来自诸如场地110这样的大型场所的广播在历史上包括经由无线电和电视(TV)节目安排的分发。然而,近年来,广播能够包括由个人和其他实体在因特网上对图像进行流传输。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于汤姆逊许可公司,未经汤姆逊许可公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610861719.3/2.html,转载请声明来源钻瓜专利网。