[发明专利]一种井下煤壁片帮预警方法及装置

权利要求书

1.一种井下煤壁片帮预警方法，其特征在于，包括：

获取目标采煤区域的视频数据；

将所述目标采煤区域的视频数据转换为各帧图片，并对每帧图片进行图像增强处理，获得对应的待识别图片；

根据每帧待识别图片以及煤壁片帮场景识别模型，获得每帧待识别图片上的候选区域信息，所述候选区域信息包括各个候选区域的区域坐标和概率值；其中，所述煤壁片帮场景识别模型是基于历史采煤图片集以及对应的煤壁片帮场景标签训练获得的；

根据每帧待识别图片上的候选区域信息以及筛选阈值，获得每个待识别区域图片；

根据每个待识别区域图片以及图像理解模型，获得每个待识别区域图片对应的语句描述；其中，所述图像理解模型是基于历史区域图片集以及对应的语义标签训练获得的；

若根据各个待识别区域图片对应的语句描述解析获得煤壁片帮发生场景，则进行煤壁片帮预警。

2.根据权利要求1所述的方法，其特征在于，基于历史采煤图片集以及对应的煤壁片帮场景标签训练获得煤壁片帮场景识别模型包括：

获取历史采煤图片集，所述历史采煤图片集中每张历史采煤图片被分割为预设数量个训练图片区域，每个训练区域具有对应的煤壁片帮场景标签；

基于所述历史采煤图片集中每张历史采煤图片的各个训练图片区域以及各自对应的煤壁片帮场景标签对初始模型进行训练，获得所述煤壁片帮场景识别模型。

3.根据权利要求1所述的方法，其特征在于，所述对每帧图片进行图像增强处理，获得对应的待识别图片包括：

获取每帧图片上各个像素点的暗通道；

根据每帧图片上各个像素点的暗通道、大气光强度值、透射率以及暗通道去雾模型，获得每帧图片对应的待识别图片；其中，所述暗通道去雾模型是预设的。

4.根据权利要求1所述的方法，其特征在于，在根据每帧待识别图片以及煤壁片帮场景识别模型，获得每帧待识别图片上的候选区域信息之前，还包括：

对每帧待识别图片进行区域滤波。

5.根据权利要求1至4任一项所述的方法，其特征在于，基于历史区域图片集以及对应的语义标签训练获得图像理解模型包括：

获取历史区域图片集，所述历史区域图片集包括的每张历史区域图片对应一个语义标签；

根据各张历史区域图片以及对应的语义标签对原始模型进行训练，获得所述图像理解模型。

6.一种井下煤壁片帮预警装置，其特征在于，包括：

获取模块，用于获取目标采煤区域的视频数据；

预处理模块，用于将所述目标采煤区域的视频数据转换为各帧图片，并对每帧图片进行图像增强处理，获得对应的待识别图片；

第一获得模块，用于根据每帧待识别图片以及煤壁片帮场景识别模型，获得每帧待识别图片上的候选区域信息，所述候选区域信息包括各个候选区域的区域坐标和概率值；其中，所述煤壁片帮场景识别模型是基于历史采煤图片集以及对应的煤壁片帮场景标签训练获得的；

第二获得模块，用于根据每帧待识别图片上的候选区域信息以及筛选阈值，获得每个待识别区域图片；

语义解析模块，用于根据每个待识别区域图片以及图像理解模型，获得每个待识别区域图片对应的语句描述；其中，所述图像理解模型是基于历史区域图片集以及对应的语义标签训练获得的；

预警模块，用于在根据各个待识别区域图片对应的语句描述解析获得煤壁片帮发生场景之后，进行煤壁片帮预警。

7.根据权利要求6所述的装置，其特征在于，还包括：

第一获取模块，用于获取历史采煤图片集，所述历史采煤图片集中每张历史采煤图片被分割为预设数量个训练图片区域，每个训练区域具有对应的煤壁片帮场景标签；

第一训练模块，用于基于所述历史采煤图片集中每张历史采煤图片的各个训练图片区域以及各自对应的煤壁片帮场景标签对初始模型进行训练，获得所述煤壁片帮场景识别模型。