[发明专利]便携式设备实现视频知识采集与标注功能的系统及方法

权利要求书

1.一种基于便携式设备实现视频知识采集与标注功能的系统，其特征在于，所述的系统包括：

资源输入模块，连接系统外部设备，用以从所连接的外部设备中获取视频文件和视频帧截取的图片文件；

结构化描述模块，用以提取所述的视频文件和视频帧截取的图片文件的结构化描述内容，产生结构化描述数据；

标注设备模块，为所述的便携式设备，用以根据所述的结构化描述数据对所述的视频文件和视频帧截取的图片文件进行标注；

双向切割模块，根据所述的视频文件和视频帧截取的图片文件的标注设置多个不同的语义分割点或区域，将所述的视频文件和视频帧截取的图片文件根据所述的语义分割点或区域划分为多个具有不同语义的视频片段或图片中的不同区域；

中心控制模块，连接所述的资源输入模块、结构化描述模块、标注设备模块和双向切割模块，用以向所述各模块发送任务指令，调度各模块的运行。

2.根据权利要求1所述的基于便携式设备实现视频知识采集与标注功能的系统，其特征在于，所述的结构化描述模块包括顺序连接的语义关系单元、时空分割单元、特征提取单元和对象识别单元，用以产生人和计算机系统可识别的关于视频和图像的多层次结构化描述信息。

3.根据权利要求1所述的基于便携式设备实现视频知识采集与标注功能的系统，其特征在于，所述的双向切割模块包括分割点设置单元和切割单元，所述的分割点设置单元根据所述的标注在所述的视频文件或视频帧截取的图片文件的设置多个不同的语义分割点或区域；所述的切割单元用以将所述的视频文件和视频帧截取的图片文件根据所述的语义分割点或区域划分为多个具有不同语义的视频片段或图片中的不同区域。

4.根据权利要求3所述的基于便携式设备实现视频知识采集与标注功能的系统，其特征在于，所述的标注设备模块包括粗颗粒标注处理单元和细颗粒标注处理单元，所述的粗颗粒标注处理单元用以根据所述的结构化描述数据对所述的视频文件和视频帧截取的图片文件进行粗颗粒标注；所述的细颗粒标注处理单元用以根据所述的结构化描述数据对所述的经双向切割模块分割的具有不同语义的视频片段或图片中的不同区域进行细颗粒标注。

5.根据权利要求1至4中任一项所述的基于便携式设备实现视频知识采集与标注功能的系统，其特征在于，所述的便携式设备包括平板电脑、智能手机和数码摄像机。

6.一种利用权利要求1所述的系统实现便携式设备视频知识采集与标注处理的方法，其特征在于，所述的方法包括以下步骤：

（201）所述的资源输入模块从所连接的互联网、局域网或视频数据库中获取视频文件和视频帧截取的图片文件；

（202）所述的结构化描述模块提取所述的视频文件和视频帧截取的图片文件的结构化描述内容，产生结构化描述数据；

（203）所述的结构化描述模块提取所述的视频文件和视频帧截取的图片文件的视频图像特征和语义数据，并将所述的图像特征和语义数据输入到结构化描述数据中；

（204）所述的标注设备模块根据所述的结构化描述数据对所述的视频文件和视频帧截取的图片文件进行粗粒度标注；

（205）所述的双向切割模块根据所述的粗粒度标注，在所述的视频文件和视频帧截取的图片文件中设置多个不同的语义分割点或区域；

（206）所述的双向切割模块将所述的视频文件和视频帧截取的图片文件根据所述的语义分割点或区域划分为多个具有不同语义的视频片段或图片中的不同区域；

（207）所述的标注设备模块对所述的具有不同语义的视频片段或图片中的不同区域进行细颗粒标注。