[发明专利]一种生成用户场景的增强现实视频信息的方法与设备

权利要求书

1.一种在用户设备端生成用户场景的增强现实视频信息的方法，其中，所述方法包括：

将用户场景对应的第一视频流的视频关键帧发送至对应的网络设备；其中，所述视频关键帧为所述第一视频流中的一帧或多帧，且所述视频关键帧基于所述用户场景而设定；

获取网络设备基于图像匹配识别确定的、与所述视频关键帧对应的场景对象相关信息，其中，所述场景对象相关信息包括场景对象的属性信息、位置信息及表面信息；

基于所述场景对象相关信息，对用户设备采集到的第二视频流的目标帧进行图像校准识别；

基于所述图像校准识别的结果，将相应的虚拟对象与所述第二视频流合成为增强现实视频信息；

其中，所述第一视频流和所述第二视频流均为所述用户场景对应用户进行录像、或是与其他用户进行交互过程中的视频流，所述视频流对应多个连续的帧，所述第二视频流为所述第一视频流后续的视频流；

所述网络设备与一个或多个用户设备之间建立信息传输通道，所述信息传输通道包括信令通道与数据通道，所述信令通道用于传输控制指令，所述数据通道用于传输虚拟对象集中的一个或多个虚拟对象、视频关键帧及视频流。

2.根据权利要求1所述的方法，其中，所述方法还包括：

采集用户场景对应的第一视频流；

从所述第一视频流中确定视频关键帧；

其中，所述将用户场景对应的第一视频流的视频关键帧发送至对应的网络设备包括：

将所述视频关键帧发送至对应的网络设备。

3.根据权利要求1或2所述的方法，其中，所述基于所述场景对象相关信息，对用户设备采集到的第二视频流的目标帧进行图像校准识别包括：

基于所述场景对象相关信息，对用户设备采集到的第二视频流的第一目标帧进行图像校准识别；

基于对所述第一目标帧进行的图像校准识别，确定所述第一目标帧对应的场景对象相关信息；

其中，所述基于所述图像校准识别的结果，将相应的虚拟对象与所述第二视频流合成为增强现实视频信息包括：

基于所述第一目标帧对应的场景对象相关信息，将相应的虚拟对象与所述第一目标帧合成为第一增强现实图像信息；

基于所述第一增强现实图像信息生成增强现实视频信息。

4.根据权利要求3所述的方法，其中，所述基于所述场景对象相关信息，对用户设备采集到的第二视频流的目标帧进行图像校准识别还包括：

基于所述第一目标帧对应的场景对象相关信息，对用户设备采集到的第二视频流的第二目标帧进行图像校准识别；

基于对所述第二目标帧进行的图像校准识别，确定所述第二目标帧对应的场景对象相关信息；

其中，所述基于所述图像校准识别的结果，将相应的虚拟对象与所述第二视频流合成为增强现实视频信息还包括：

基于所述第二目标帧对应的场景对象相关信息，将相应的虚拟对象与所述第二目标帧合成为第二增强现实图像信息；

基于所述第一增强现实图像信息和所述第二增强现实图像信息生成增强现实视频信息。

5.根据权利要求1至4中任一项所述的方法，其中，所述方法还包括：

呈现第二视频流对应的所述增强现实视频信息。

6.根据权利要求1至5中任一项所述的方法，其中，所述方法还包括：

将所述增强现实视频信息提供至与所述用户设备对应的一个或多个其他用户设备。

7.根据权利要求1至6中任一项所述的方法，其中，所述方法还包括：

获取用户对虚拟对象的操作指令信息，并基于所述操作指令信息，执行相应操作。

8.根据权利要求7所述的方法，其中，所述获取用户对虚拟对象的操作指令信息，并基于所述操作指令信息，执行相应操作包括以下至少任一项：

获取用户的触屏操作信息，基于所述触屏操作信息确定用户对虚拟对象的操作指令信息；

通过用户设备摄像装置获取用户的手势信息，基于所述手势信息确定用户对虚拟对象的操作指令信息；

获取用户的语音信息，并基于所述语音信息确定用户对虚拟对象的操作指令信息。