[发明专利]增强现实场景的处理方法、装置及设备、计算机存储介质在审
申请号: | 201710787487.6 | 申请日: | 2017-09-04 |
公开(公告)号: | CN107590453A | 公开(公告)日: | 2018-01-16 |
发明(设计)人: | 项小明 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06T15/06 |
代理公司: | 广州三环专利商标代理有限公司44202 | 代理人: | 郝传鑫,熊永强 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 增强 现实 场景 处理 方法 装置 设备 计算机 存储 介质 | ||
本发明实施例公开了一种增强现实场景的处理方法、装置及设备,其中,方法包括:获取由摄像装置拍摄的第一视频帧中与目标标记图像相关的第一特征点信息;按照光流跟踪算法对各个第一特征点信息所对应的第一特征点进行跟踪,确定在所述摄像装置拍摄的第二视频帧中的第二特征点信息;构建第二视频帧与目标标记图像的单映射矩阵,所述单映射矩阵是根据各个第二特征点信息与所述目标标记图像的源特征点构建的;根据所述单映射矩阵对所述第二视频帧进行增强现实处理。采用本发明实施例,降低了目标识别时间,节省了软硬件资源,提高了视频帧中目标识别的效率,使AR场景的实现更快捷准确。
技术领域
本发明涉及增强现实技术领域,尤其涉及一种增强现实场景的处理方法、装置及设备、计算机存储介质。
背景技术
增强现实技术(Augmented Reality,AR)是一种通过实时地计算拍摄到的图像中目标对象的位置,然后在相应的图像位置处加上虚拟图像、虚拟视频等虚拟内容的技术,基于AR技术,可以将虚拟场景与现实环境相结合,并进行有效的互动。
可以基于图像识别技术的实现方式来实现AR场景,也就是说,通过图像识别技术分别在摄像装置拍摄到的各个视频帧中识别出某个需要叠加虚拟内容的图像对象,再确定该图像对象在视频帧中的位置,根据确定的位置叠加虚拟内容,例如,需要图像识别技术在拍摄到的视频帧中识别出桌子等对象,根据桌子在图像中的位置,叠加书本、电脑等虚拟内容在该桌子的桌面上。
通过上述的AR实现方式需要对拍摄到的每张视频帧进行图像分析识别,所损耗的设备软硬件资源较多,并且图像识别需要对整张视频帧进行分析识别,消耗的时长较大,特别是在拍摄到的现实环境的图像较为复杂时,识别出图像对象所耗费的时长更长。
发明内容
本发明实施例提供一种增强现实场景的处理方法、装置及设备、计算机存储介质,可较为快捷地完成AR场景处理。
一方面,本发明实施例提供了一种增强现实场景的处理方法,包括:
获取由摄像装置拍摄的第一视频帧中与目标标记图像相关的第一特征点信息;
按照光流跟踪算法对第一特征点信息所对应的第一特征点进行跟踪,确定在所述摄像装置拍摄的第二视频帧中的第二特征点信息;
构建第二视频帧与目标标记图像的单映射矩阵,所述单映射矩阵是根据各个第二特征点信息与所述目标标记图像的源特征点构建的;
根据所述单映射矩阵对所述第二视频帧进行增强现实处理。
另一方面,本发明实施例还提供了一种增强现实场景的处理装置,包括:
获取模块,用于获取由摄像装置拍摄的第一视频帧中与目标标记图像相关的第一特征点信息;
确定模块,用于按照光流跟踪算法对第一特征点信息所对应的第一特征点进行跟踪,确定在所述摄像装置拍摄的第二视频帧中的第二特征点信息;
构建模块,用于构建第二视频帧与目标标记图像的单映射矩阵,所述单映射矩阵是根据各个第二特征点信息与所述目标标记图像的源特征点构建的;
处理模块,用于根据所述单映射矩阵对所述第二视频帧进行增强现实处理。
再一方面,本发明实施例还提供了一种智能设备,包括:处理器和存储装置;
所述存储装置,用于存储计算机程序指令;
所述处理器,调用所述计算机程序指令,用于
获取由摄像装置拍摄的第一视频帧中与目标标记图像相关的第一特征点信息;
按照光流跟踪算法对第一特征点信息所对应的第一特征点进行跟踪,确定在所述摄像装置拍摄的第二视频帧中的第二特征点信息;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710787487.6/2.html,转载请声明来源钻瓜专利网。