[发明专利]数据处理方法及相关装置

权利要求书

1.一种数据处理方法，其特征在于，所述方法包括：

基于指定的检测对象类型，分别对参考视频中包含的多个参考视频帧进行面部检测，确定所述多个参考视频帧各自包含的至少一个面部图像及相应的面部特征；

基于所述检测对象类型，分别对所述多个参考视频帧进行肢体检测，确定所述多个参考视频帧各自包含的至少一个肢体图像及相应的肢体特征；

基于确定的各面部图像与各肢体图像，获得所述参考视频对应的至少一个参考移动轨迹，每个参考移动轨迹中包含一个检测对象的多个肢体特征和多个面部特征；

基于获得的各参考移动轨迹，以及基于各待处理视频各自对应的候选移动轨迹，从所述各待处理视频中，确定目标视频；

其中，所述确定相应的面部特征，包括：

将所述多个参考视频帧各自包含的至少一个面部图像，分别输入至已训练的目标面部特征提取模型中，得到相应的面部特征，其中，所述目标面部特征提取模型是通过迭代训练得到的，每次迭代过程中，执行以下操作：

基于样本数据集中包含的各相似样本组，以及预设批次数据处理量，构建各批次各自对应的训练数据集，每个训练数据中包含至少三个样本，所述至少三个样本中的一个样本对应的相似样本组，与其他样本对应的相似样本组不同；

将构建的各训练子集合，分批次输入至初始面部特征提取模型，得到相应的模型总损失，并基于得到的模型总损失，对所述初始面部特征提取模型进行调整，以及在确定满足预设收敛条件时，输出目标面部特征提取模型；

其中，所述基于样本数据集中包含的各相似样本组，以及预设批次数据处理量，构建各批次各自对应的训练数据集，包括：

基于预设批次数据处理量，从样本数据集中包含的各相似样本组中，抽取出各批次各自对应的相似样本对；

针对每个相似样本对，分别执行以下操作：

将一个相似样本对中包含的一个样本作为参考样本，并分别从其他相似样本对中，抽取出对应的一个其他样本，以及计算抽取出的各其他样本分别与所述参考样本之间的第二样本相似度；

基于计算出的第二样本相似度，从所述各其他样本中，确定出至少一个目标样本，并基于所述至少一个目标样本和所述一个相似样本对，得到至少一个训练数据。

2.如权利要求1所述的方法，其特征在于，所述基于确定的各面部图像与各肢体图像，获得所述参考视频对应的至少一个参考移动轨迹，包括：

基于确定的各面部图像与各肢体图像，确定所述各面部图像与所述各肢体图像之间的面部肢体关联关系；

基于所述面部肢体关联关系，以及基于所述各肢体图像各自对应的肢体特征之间的第一相似度，获得所述参考视频对应的至少一个参考移动轨迹。

3.如权利要求2所述的方法，其特征在于，所述基于确定的各面部图像与各肢体图像，确定所述各面部图像与所述各肢体图像之间的面部肢体关联关系，包括：

针对所述多个参考视频帧中的每个参考视频帧，分别执行以下操作：

计算一个参考视频帧中包含的至少一个肢体图像，分别与所述一个参考视频帧中包含的至少一个面部图像之间的图像重合面积；

将所述至少一个肢体图像和所述至少一个面部图像中，对应的图像重合面积不小于预设重合面积阈值的面部图像与肢体图像进行关联。

4.如权利要求2所述的方法，其特征在于，所述基于所述面部肢体关联关系，以及基于所述各肢体图像各自对应的肢体特征之间的第一相似度，获得所述参考视频对应的至少一个参考移动轨迹，包括：

计算所述各肢体图像各自对应的肢体特征之间的第一相似度，并基于计算出的各第一相似度，确定所述参考视频对应的前后帧肢体关联关系；

基于所述面部肢体关联关系和所述前后帧肢体关联关系，获得所述参考视频对应的至少一个参考移动轨迹。