[发明专利]特征处理方法、动作定位方法及相关设备

权利要求书

1.一种图像特征处理方法，其特征在于，包括：

获取图像或图像序列中待检测动作的待处理特征；

分别对所述待处理特征进行至少两个维度转换操作，得到不同维度的至少两个第一特征；

基于注意力机制，确定各个所述第一特征的注意力处理参考值；并基于对应的所述注意力处理参考值，分别对各个所述第一特征进行处理，得到各个所述第一特征各自对应的第二特征；

对各个所述第二特征进行融合处理，得到所述待处理特征对应的目标特征。

2.根据权利要求1所述的方法，其特征在于，所述对各个所述第二特征进行融合处理，得到所述待处理特征对应的目标特征，包括：

对各个所述第二特征进行拼接，得到拼接特征；

对所述拼接特征进行维度转换操作，得到与所述待处理特征的维度一致的所述目标特征。

3.根据权利要求1所述的方法，其特征在于，所述基于注意力机制，确定各个所述第一特征的注意力处理参考值，包括：

对所述第一特征进行转换，得到第三特征和第四特征，其中，所述第三特征、所述第四特征、所述第一特征的维度相同；

对所述第三特征和所述第四特征进行相乘处理，得到第五特征；

对所述第五特征进行归一化处理，得到归一化结果，并利用所述第一特征和所述归一化结果得到所述第一特征的注意力处理参考值。

4.如权利要求1所述的方法，其特征在于，所述基于对应的所述注意力处理参考值，分别对各个所述第一特征进行处理，得到各个所述第一特征各自对应的第二特征，包括：

对各个所述第一特征与对应的所述注意力处理参考值进行加权处理，得到各个所述第一特征对应的所述第二特征。

5.如权利要求1所述的方法，其特征在于，在所述对各个所述第二特征进行融合处理，得到所述待处理特征对应的目标特征之后，还包括：

基于所述目标特征，对所述待检测动作进行识别。

6.一种动作定位方法，其特征在于，包括：

将目标视频中待检测动作的特征，确定为待处理特征；

利用权利要求1至4任一项所述的方法对所述待处理特征进行处理，得到目标特征；

基于所述目标特征，确定所述目标视频中所述待检测动作的视频帧定位信息；其中，所述视频帧定位信息用于表示所述目标视频中包含所述待检测动作的视频帧。

7.根据权利要求6所述的方法，其特征在于，所述基于所述目标特征，确定所述目标视频中所述待检测动作的视频帧定位信息，包括：

基于所述目标特征，确定针对所述目标视频预设的候选视频帧集中，各个候选视频帧为参考视频帧的估计值；

基于各个所述估计值，从所述候选视频帧集中选取部分候选视频帧；

基于选取的候选视频帧，得到所述视频帧定位信息。

8.根据权利要求7所述的方法，其特征在于，所述参考视频帧包括起始视频帧和结束视频帧，所述基于所述目标特征，确定针对所述目标视频预设的候选视频帧集中，各个候选视频帧为参考视频帧的估计值，包括：

基于所述目标特征，预测各个所述候选视频帧为所述起始视频帧的第一估计值，以及各个所述候选视频帧为所述结束视频帧的第二估计值；

所述基于各个所述估计值，从所述候选视频帧集中选取部分候选视频帧，包括：

基于各个所述候选视频帧的第一估计值和所述第二估计值，选取部分所述候选视频帧。

9.根据权利要求8所述的方法，其特征在于，所述基于所述目标特征，预测各个所述候选视频帧为所述起始视频帧的第一估计值，以及各个所述候选视频帧为所述结束视频帧的第二估计值，包括：

将所述目标特征确定为新的所述待处理特征，利用权利要求1至4任一项所述的方法对新的所述待处理特征进行处理，得到新的所述目标特征；

对新的所述目标特征进行预测，得到各个所述候选视频帧的所述第一估计值和第二估计值。