[发明专利]用于执行交叉口情景检索的系统及其方法

权利要求书

1.一种用于执行交叉口情景检索的计算机实现的方法，包括：

接收自我意识车辆的周围环境的视频流；

分析所述视频流，以将所述视频流裁剪成与所述自我意识车辆的行进相关联的交叉口场景的视频剪辑；

使用描述交叉口情景的动作单元来注释包括在所述交叉口场景内的所述自我意识车辆、动态对象以及它们的运动路径，其中所述动作单元包括描述所述自我意识车辆和所述动态对象的动作单元名词，以及描述所述自我意识车辆和所述动态对象在所述交叉口场景内的相应运动路径的动作单元动词；以及

基于对存储动作单元的组合的电子数据集的查询来检索至少一个交叉口情景，以可操作地控制包括所述至少一个交叉口情景的至少一个交叉口情景视频剪辑的呈现。

2.根据权利要求1所述的计算机实现的方法，其中接收所述视频流包括在所述自我意识车辆行进时接收包括所述自我意识车辆的所述周围环境的自我中心视图的所述视频流，其中所述自我中心视图在预定时间段期间被捕获。

3.根据权利要求1所述的计算机实现的方法，其中分析所述视频流以裁剪所述视频流包括分析所述视频流以确定当所述自我意识车辆接近、进入、穿过和离开所述交叉口场景时与所述动态对象及其相应运动相关联的动作先验。

4.根据权利要求1所述的计算机实现的方法，其中注释所述自我意识车辆、所述动态对象以及它们的运动路径包括利用神经网络来分析每个交叉口场景的至少一个视频剪辑，以对所述交叉口场景内的所述动态对象进行定位和分类。

5.根据权利要求4所述的计算机实现的方法，其中注释所述自我意识车辆、所述动态对象以及它们的运动路径包括利用所述神经网络分析位于所述交叉口场景内的所述动态对象的位置差异，以处理所述运动路径的三维位置表示，其中所述自我意识车辆和所述动态对象的所述运动路径各自涉及所述自我意识车辆和所述动态对象在所述交叉口场景内的行进路径中的每个行进路径的起点和终点。

6.根据权利要求5所述的计算机实现的方法，其中注释所述自我意识车辆、所述动态对象以及它们的运动路径包括利用所述神经网络确定所述交叉口场景的全局环境，其中所述全局环境涉及所述交叉口场景的不与所述动态对象有关的部分。

7.根据权利要求6所述的计算机实现的方法，其中注释所述自我意识车辆、所述动态对象以及它们的运动路径包括使用所述自我意识车辆和所述动态对象的所述运动路径以及所述交叉口场景的全局环境相对于所述自我意识车辆的位置融合所述动态对象的位置和分类，以输出融合空间数据，所述融合空间数据包括捕获空间信息的所述交叉口场景的三维表示。

8.根据权利要求7所述的计算机实现的方法，其中分析所述融合数据以确定所述动作单元名词和所述动作单元动词，其中将与所述自我意识车辆和所述动态对象中的每个动态对象有关的所述动作单元名词和与所述自我意识车辆和所述动态对象的所述运动路径有关的所述动作单元动词组合。

9.根据权利要求8所述的计算机实现的方法，其中所述动作单元的组合存储在所述电子数据集上并与所述交叉口场景的所述视频剪辑关联，其中基于在交叉口情景检索用户界面上提供的对象和运动搜索输入的输入来检索所述交叉口场景的至少一个视频剪辑，以检索所述至少一个视频剪辑并将其呈现为包括与所述交叉口场景相关联的所述至少一个交叉口情景的至少一个交叉口情景视频剪辑。