[发明专利]一种视频中运动物体上局部微小运动的快速放大方法在审
| 申请号： | 201910527271.5 | 申请日： | 2019-06-18 |
| 公开（公告）号： | CN110519484A | 公开（公告）日： | 2019-11-29 |
| 发明（设计）人： | 薛斌党;薛文芳;韩艳超 | 申请（专利权）人： | 天津中科智能识别产业技术研究院有限公司 |
| 主分类号： | H04N5/14 | 分类号： | H04N5/14;H04N5/262 |
| 代理公司： | 12107 天津市三利专利商标代理有限公司 | 代理人： | 韩新城<国际申请>=<国际公布>=<进入 |
| 地址： | 300457 天津市滨海新区天津经济技*** | 国省代码： | 天津;12 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开一种视频中运动物体上局部微小运动的快速放大方法，是将视频帧图像转换到YIQ颜色空间，对Y通道Riesz金字塔空域分解，得到不同空间频率的子带图像；对金字塔每层子带图像Riesz变换，提取子带图像局部幅度和局部四元相位；对局部四元相位时域滤波，提取二阶四元相位加速度信息和三阶四元相位的加加速度信息，进行基于局部幅值的加权高斯去噪处理；利用三阶四元相位的加加速度信息构造平滑度滤波器对二阶四元相位滤波，提取运动物体上局部微小运动；放大滤波后二阶四元相位并进行相移变换，解构视频帧图像金字塔，重建得到运动放大视频帧图像。本发明运算效率高，视觉效果好，适用对象广，通用性强。 | ||
| 搜索关键词： | 加速度信息 视频帧图像 子带图像 二阶 金字塔 微小运动 运动物体 三阶 滤波器 放大滤波 空间频率 时域滤波 适用对象 视觉效果 通用性强 相位滤波 颜色空间 运动放大 运算效率 平滑度 高斯 去噪 相移 加权 空域 放大 视频 分解 重建 转换 | ||
【主权项】：
1.视频中运动物体上局部微小运动的快速放大方法，其特征在于，包括：/n步骤1：将视频帧图像转换到YIQ颜色空间，对Y通道进行Riesz金字塔空域分解以得到不同空间频率的子带图像；/n步骤2：对金字塔每层子带图像进行Riesz变换，提取子带图像的局部幅度和局部四元相位；其中，局部幅度表示强度变化，局部四元相位表示运动信息和图像结构；/n步骤3：对局部四元相位进行时域滤波，分别提取二阶四元相位的加速度信息和三阶四元相位的加加速度信息，并进行基于局部幅值的加权高斯去噪处理；/n步骤4：利用三阶四元相位的加加速度信息构造的平滑度滤波器对二阶四元相位进行滤波，提取运动物体上局部微小运动；/n步骤5：放大滤波后的二阶四元相位，并对其进行相移变换，解构视频帧图像金字塔，与色度信息结合，重建得到运动放大的视频帧图像。/n
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于天津中科智能识别产业技术研究院有限公司，未经天津中科智能识别产业技术研究院有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910527271.5/，转载请声明来源钻瓜专利网。
- 同类专利
- 一种视频图像中静止像素点检测方法及系统-201611253701.1
- 李晨;韩睿;郭若杉;刘壮 - 中国科学院自动化研究所
- 2016-12-30 - 2020-02-07 - H04N5/14
- 本发明提供一种视频图像中静止像素点检测方法及系统，该方法包括：计算相邻帧中待处理像素点对应邻域的特征值；根据特征值，确定表征待处理像素点为静止物体内非边缘像素点的置信度rel1，以及表征待处理像素点为半透明静止物体内像素点的置信度rel2；根据rel1和rel2的值，从特征值中选择相应的值判断待处理像素点是否为静止像素点；当判断待处理像素点为静止像素点时，将待处理像素点对应的计数值加1，当判断待处理像素点不为静止像素点时，将计数值减1；将计数值与设定的阈值T进行比较，若计数值大于T，则确定待处理像素点为静止像素点。本发明可以准确检测出视频图像中的静止像素点，从而避免视频图像帧率转换中出现物体破碎现象。
- 一种基于密集连接网络的视频帧序列生成方法-201910322024.1
- 晏婕;秦贵和;赵睿;黄玥;袁帅;许骞艺;姜慧明;张钟翰 - 吉林大学
- 2019-04-19 - 2020-02-07 - H04N5/14
- 本发明涉及一种基于密集连接网络的视频帧序列生成方法，属于计算机视觉领域以及视频信号处理技术领域。以生成对抗网络为本发明方法的结构的基线，使用密集连接网络构建本发明的生成器模型，对输入视频帧序列的后续视频帧序列进行生成。本发明充分考虑输入视频帧序列内容的分布差异性，对具有特殊运动特点的部分增加权重。根据这种方式设计的损失函数能够为本发明中的生成器模型提供注意力机制，使得生成器模型能够对后续视频帧序列的不同部分有针对性地生成，实现对同一后续视频帧不同部分的差异性处理，在保证生成的后续视频帧序列与输入视频帧序列具有连续运动信息的同时，能够有效提升生成的后续视频帧序列的图像质量。
- 一种SoPC+千兆以太网的视频去雾装置-201920747945.8
- 孙元;杨超;印茂伟;廖鹏;吴轩光;黄震;韦家军 - 西南科技大学
- 2019-05-23 - 2020-01-21 - H04N5/14
- 本实用新型专利公开了一种SoPC+千兆以太网的视频去雾装置，所述装置包括中央处理器、两路以太网模块、视频采集模块、FLASH配置模块，DDR3缓存模块，电源模块、时钟模块、SD卡模块以及输出显示模块。所述的两路以太网模块、FLAHS配置模块、SD卡模块、DDR3缓存模块与中央处理器的PS端相连接，视频采集模块以及输出显示模块与中央处理器PL端相连接，电源模块分别连接于两路以太网模块、FLASH配置模块、DDR3缓存模块以及SD卡模块，时钟模块与中央处理器PL与PS端连接。本实用新型能作为视频采集模块对视频图像进行实时去雾处理和传输，除此之外，本实用新型还支持作为图像中继站实现对视频图像数据进行预处理以及作为终端实现视频数据的显示和模式选择。
- 一种多信息融合的帧率上变换运动估计方法及系统-201610657029.6
- 张小云;鲁国;包文博;高志勇;陈立 - 上海交通大学
- 2016-08-11 - 2020-01-07 - H04N5/14
- 本发明公开一种多信息融合的帧率上变换运动估计方法及系统，方法步骤为：读取前后两帧图像，分别对其进行降采样，对降采样的图像进行基于光流法的运动估计，对原始图像进行块匹配的运动估计，提取前后两帧图像的SIFT特征，计算特征向量并进行特征匹配，得到特征匹配的运动矢量，对块匹配运动矢量、特征匹配运动矢量和光流法运动矢量进行融合，运动矢量的传递。本发明相对比传统基于块匹配的运动估计算法，精度提升明显。针对一般的光流估计算法，在小物体运动矢量以及运动边界矢量保持上具有更好的性能。
- 基于遮挡检测的运动补偿方法及系统-201611262019.9
- 韩睿;郭若杉;李晨;刘壮 - 中国科学院自动化研究所
- 2016-12-30 - 2020-01-03 - H04N5/14
- 本发明涉及一种基于遮挡检测的运动补偿方法及系统，通过运动估计得到前向运动矢量和后向运动矢量，对显露/遮挡区域进行检测；根据运动矢量到达插值帧的位置与待处理块的重叠面积计算显露/遮挡概率并计算插值权重；根据前一帧和当前帧各自对应的前、后向运动矢量，以及显露/遮挡区域检测结果，计算得到插值帧的运动矢量；通过插值帧运动矢量的一致性与前面所述的插值权重，对显露/遮挡区域与背景的交界处进行检测并校正其插值权重；通过插值得到逐像素的插值权重；根据插值帧运动矢量和像素插值权重插值出中间帧，得到最终帧率提升后的视频。提高了显露/遮挡区域检测的精确度，明显减轻了运动补偿图像中的halo现象。
- 支持多路摄像头同时使用的系统-201910964605.5
- 莫艺宇;韩捷;裴智 - 深圳市瑞联高科通讯有限公司
- 2019-10-11 - 2019-12-24 - H04N5/14
- 本发明涉及一种支持多路摄像头同时使用的系统，其包括主控模块和多通道模数转换模块，所述主控模块支持一路ISP并带有多路虚拟通道，所述多通道模数转换模块和所述主控模块通过通讯接口连接，所述多通道模数转换模块外接有多路摄像头以接收多路所述摄像头拍摄的视频数据，所述多通道模数转换模块用于将多路所述摄像头拍摄的视频数据分别进行模数转换处理，并将处理后的数据通过所述通讯接口和多路所述虚拟通道分别同时传输给所述主控模块，所述主控模块还用于通过一路ISP处理所接收的多路所述摄像头拍摄的视频数据中的图像信号。用仅支持单个ISP带虚拟通道的主控模块，配合一个模数转换模块实现多路摄像头同时使用。
- 拍摄图像方法及电子设备-201610121500.X
- 廖安华 - 联想(北京)有限公司
- 2016-03-03 - 2019-12-24 - H04N5/14
- 本发明公开了一种拍摄图像方法及电子设备，方法包括：获取图像数据；在图像数据中识别目标对象，并获得识别出的目标对象的轮廓；基于轮廓对图像数据中识别的目标对象进行处理；基于处理后图像数据生成拍摄图像。实施本发明，能够高效对一系列的图像中的目标对象进行处理。
- 一种无极可调带显示计时有源DTV数字电视放大器-201910885544.3
- 刘小兵;李勤 - 东莞市百傲电子科技有限公司
- 2019-09-19 - 2019-12-13 - H04N5/14
- 本发明提出一种无极可调带显示计时有源DTV数字电视放大器，接于天线与同轴线缆之间，目的在于实现调节放大器的放大倍数，以及对放大器的放大倍数进行检测并显示，其特征在于：包括LNA放大单元、无极调节单元、增益检测及显示单元；所述LNA放大单元具有源端、射频输入端和射频输出端，所述源端连接直流源，所述射频输入端用于连接天线，所述射频输出端用于连接同轴线缆；所述无极调节单元包括连接直流源的电位器，所述电位器的输出端连接至所述LNA放大单元的源端以提供偏置电压；所述增益检测及显示单元包括控制芯片、显示驱动电路及显示屏，所述控制芯片连接至所述无极调节单元以采集实时电压，并在显示屏上显示与该实时电压对应的放大倍数。
- 全景图像的数字视频稳像方法、装置、设备及存储介质-201910887072.5
- 高振宇;韩冲 - 浙江大搜车软件技术有限公司
- 2019-09-19 - 2019-12-13 - H04N5/14
- 本发明涉及一种全景图像的数字视频稳像方法、装置、设备及存储介质。其中，该方法包括：对图像序列进行运动轨迹估计，得到将图像序列中的每帧图像刚性变换到其前一帧图像的第一变换参数；计算将每帧图像刚性变换到图像序列中的参考帧图像的第二变换参数；根据每帧图像的一个或者多个相邻图像对应的第二变换参数对每帧图像的第二变换参数进行平滑处理，分别得到每帧图像对应的第三变换参数；根据每帧图像对应的第三变换参数与第二变换参数的差值，对图像序列进行仿射变换，得到仿射变换后的图像序列。通过本发明，解决了相关技术中电子防抖方法对较长的全景图像序列的去抖动效果不理想的问题，提高了对全景图像序列的去抖动效果。
- 一种视频信号放大器-201710210978.4
- 刘小玲 - 贵州航天电子科技有限公司
- 2017-03-31 - 2019-12-13 - H04N5/14
- 本发明提供了一种视频信号放大器，包括腔体、印制板Ⅰ、印制板Ⅱ、上盖板、下盖板；所述腔体上、下中空为两个型腔，腔体中间有隔板，在隔板上、下分别设置有上凸台、下凸台；所述上盖板、下盖板将腔体封盖并采用台阶搭接方式，用上螺钉、下螺钉紧固；所述印制板Ⅰ安装在腔体里的上凸台上并用螺钉紧固，印制板Ⅱ安装在腔体里的下凸台上并用螺钉紧固；所述腔体侧面设置有第一J‑SMP连接器、第二J‑SMP连接器和第三J‑SMP连接器，其中第一J‑SMP连接器连接印制板Ⅱ，第二J‑SMP连接器和第三J‑SMP连接器均连接印制板Ⅰ。本发明安装方便，占用空间极小，可操作性强，抗电磁干扰性能强，体积小，结构紧凑，安装调试快捷、安装维护方便。
- 一种视频处理器和智能算法处理器视频分析结果对应方法-201911005685.8
- 丁晨阳;周胜 - 扬州市职业大学(扬州市广播电视大学)
- 2019-10-22 - 2019-12-10 - H04N5/14
- 本发明公开了一种视频处理器和智能算法处理器视频分析结果对应方法，包含以下步骤：A、视频处理器采集原始图像，并进行ISP处理；B、通过BT1120接口将视频芯片的YUV数据传输给AI算法处理器；C、AI算法处理收到YUV数据，进行图像分析；D、分析结果通过SPI或者UART传回给视频处理器，本发明能够解决视频处理器的原始数据帧和智能算法处理器数据结果对应关系，以便视频处理器可以根据智能算法处理结果对原始数据帧进行抠图或者画视频框等等，而不会存在智能算法结果跟原始数据帧不对应，导致抠图或者画视频框不对的情况。
- 确定ADC中增益和偏移量及其对应关系的方法和装置-201710090103.5
- 吴彪 - 上海顺久电子科技有限公司
- 2017-02-20 - 2019-12-10 - H04N5/14
- 本发明公开了一种确定ADC中增益和偏移量及其对应关系的方法和装置，属于电子技术领域。该方法包括：针对输入白信号的不同幅值，调整ADC的偏移量，并记录输出视频信号满足预设条件时的偏移量；保持记录的偏移量不变，调整ADC的增益并记录输出视频信号的消隐期幅值与预设幅值相等时的增益；该预设条件为：最大幅值与消隐期幅值之差和消隐期幅值的比值为预设比值，且平均幅值与ADC量程的中值相等；通过函数拟合的方式确定记录的偏移量与增益之间的对应关系。该对应关系能够保证ADC中增益和偏移量的准确匹配，因此根据该对应关系对输入视频信号的幅值进行调整时，可以对输入视频信号进行有效补偿，保证了输出视频信号的质量。
- 一种视频及图形信号自动相位检测方法及装置-201611185043.7
- 朱健;傅文海;余方桃;黄新军 - 湖南国科微电子股份有限公司
- 2016-12-20 - 2019-12-10 - H04N5/14
- 本发明是关于一种视频及图形信号自动相位检测方法及装置，包括：包括：从多路的同一模拟视频及图形信号中获取同一类型的模式信号；根据当前相位控制信号，产生不同相位的采样时钟；利用不同相位的采样时钟，将模式信号转换为不同相位的数字信号；分别逐行检测不同相位数字信号各行的边缘数量和锐利度；分别统计不同相位数字信号的边缘数量；当任一相位数字信号的边缘数量大于预设边缘数量阈值时，根据已检测的不同相位数字信号各行的锐利度，获取所述模式信号的较好相位；更新相位控制信号，获取模式信号的最佳相位；获取其他类型的模式信号的最佳相位，直至获取到所有类型的模式信号的最佳相位。本方法APD收敛时间快，用户体验度高。
- 饱和度增强方法及装置-201610717997.1
- 李国盛;杨冬东;冯超 - 北京小米移动软件有限公司
- 2016-08-24 - 2019-12-03 - H04N5/14
- 本公开揭示了一种饱和度增强方法及装置，属于显示技术领域。所述方法，包括：获取显示内容对应的至少一个图层的图层特征信息；根据图层特征信息识别每个图层的图层类型；对于每个图层，选择与图层类型所对应的饱和度增强方式，使用饱和度增强方式对图层进行增强；对增强后的图层所叠加形成的显示内容进行显示。本公开解决了对终端中的每帧显示内容进行采用相同的饱和度增强方式时，会降低UI图层的美观程度；达到了对于终端中的每帧图层，不同图层类型采用不同的饱和度增强方式，每种图层类型的图层都能得到较好的色彩，从而整体上提升最终的显示内容的显示效果。
- 基于单一探测镜头实现教师学生自动跟踪的方法和系统-201710174262.3
- 王雷 - 北京昊翔信达科技有限公司
- 2017-03-22 - 2019-12-03 - H04N5/14
- 本发明涉及基于单一探测镜头实现教师学生自动跟踪的方法及系统，在教室的前墙上安装学生摄像机，后墙上安装教师摄像机和探测摄像机后，实时读取探测摄像机拍摄的原始图像；根据人体运动状态检测方法，识别出有效的运动目标及该运动目标的运动状态，并在教师活动区域启动教师摄像机进行跟踪拍摄，在学生活动区域启动学生摄像机进行跟踪拍摄；若教师学生活动交叉区域内出现有效的运动目标，判断运动目标是否存在人脸特征信息并在识别教师目标后启动教师摄像机进行跟踪拍摄。本发明的技术方案，通过一台探测摄像机的视频实现有效识别教师和学生目标，并判定目标属性，从而控制相应的教师摄像机和学生摄像机进行自动跟踪拍摄。
- 低空飞行场景的无人机视频稳定方法和装置-201710198431.7
- 曹先彬;陈磊;刘俊英;郑洁宛 - 北京航空航天大学
- 2017-03-29 - 2019-12-03 - H04N5/14
- 本发明提供一种低空飞行场景的无人机视频稳定方法和装置，其中方法包括：获取待稳定无人机视频，对视频中的每一帧进行特征点提取，连接得到各个特征点的轨迹，轨迹按阈值分为长轨迹与短轨迹，基于长轨迹和平滑长轨迹可以计算得到每帧图片对应的全局变换矩阵，结合每帧图片相应的全局变换矩阵、短轨迹以及低通滤波器，可以得到平滑短轨迹，最终采用多平面优化方法结合长轨迹与短轨迹进行计算，得到稳定的无人机视频。本发明对特征点轨迹进行了分类，在保证特征点充足区域稳定效果的同时，对特征点不充足的区域起到了稳定效果，能够在一定程度上解决低空飞行场景中多平面优化方法边缘不稳定的影响，从而提高无人机视频的稳定效果。
- 插值帧定位方法及装置-201710679927.6
- 杨高波;陈军;丁湘陵;李旭勇 - 湖南兴天电子科技有限公司
- 2017-08-09 - 2019-12-03 - H04N5/14
- 本发明提供了插值帧定位方法及装置，涉及多媒体信息安全技术领域，其中，该插值帧定位方法包括：从预先构建的训练集合样本中提取马尔科夫特征，并借助集成分类器构建分类模式，计算待测视频的视频集合Γ的马尔科夫统计特征，以获取决策结果，将决策结果中每三个连续检测为插值帧的中间帧划归到每轮循环中检测到的插值帧Ξ中，中间帧的帧数目记为Nup，标定检测到的所有插值帧的定位位置记作ψ，ψ修改为ψ和Ξ的并集，Ts为更新后的Γ的播放时间，
Σ为Γ内的视频帧的数目和，f为待测视频的帧率，判断是否满足Nup<Ts，如果是，则输出插值帧的定位位置集合ψ，如果否，更新Γ为Γ和Ξ的差集，重新计算Γ的马尔科夫统计特征，从而实现对基于运动补偿视频上转换的插值帧的准确定位。
- 一种视频中运动物体上局部微小运动的快速放大方法-201910527271.5
- 薛斌党;薛文芳;韩艳超 - 天津中科智能识别产业技术研究院有限公司
- 2019-06-18 - 2019-11-29 - H04N5/14
- 本发明公开一种视频中运动物体上局部微小运动的快速放大方法，是将视频帧图像转换到YIQ颜色空间，对Y通道Riesz金字塔空域分解，得到不同空间频率的子带图像；对金字塔每层子带图像Riesz变换，提取子带图像局部幅度和局部四元相位；对局部四元相位时域滤波，提取二阶四元相位加速度信息和三阶四元相位的加加速度信息，进行基于局部幅值的加权高斯去噪处理；利用三阶四元相位的加加速度信息构造平滑度滤波器对二阶四元相位滤波，提取运动物体上局部微小运动；放大滤波后二阶四元相位并进行相移变换，解构视频帧图像金字塔，重建得到运动放大视频帧图像。本发明运算效率高，视觉效果好，适用对象广，通用性强。
- 专利分类
