[发明专利]孪生三维模型生成方法、装置、电子设备及存储介质

权利要求书

1.一种孪生三维模型生成方法，其特征在于，所述方法包括：

获取待处理图片以及三维基本模型数据库；

分别对所述待处理图片进行模块分割和特征检测，得到与所述待处理图片对应的多个模块，以及与所述模块对应的模块图片特征，其中，所述模块图片特征至少包括文本标签、几何特征、视角特征以及图片纹理特征；

基于所述模块图片特征在所述三维基本模型数据库中召回与所述模块对应的多个基本三维模型，并分别对所述基本三维模型进行图像处理，得到与多个所述基本三维模型对应的多个二维图片；

基于所述模块与多个所述二维图片，确定与所述模块对应的孪生基本三维模型，其中，所述孪生基本三维模型为与所述模块最相似的所述基本三维模型；

基于与各所述模块对应的各所述孪生基本三维模型，得到与所述待处理图片对应的孪生三维模型。

2.根据权利要求1所述的孪生三维模型生成方法，其特征在于，所述模块图片特征还包括模块间树级关系，所述分别对所述待处理图片进行模块分割和特征检测，得到与所述待处理图片对应的多个模块，以及与所述模块对应的模块图片特征，包括：

分别对所述待处理图片进行层级化模块分割和特征检测，得到与所述待处理图片对应的多个模块，以及与所述模块对应的模块间树级关系，其中，所述模块间树级关系表示不同所述模块间的位置关系。

3.根据权利要求1或2所述的孪生三维模型生成方法，其特征在于，所述基于所述模块图片特征在所述三维基本模型数据库中召回与所述模块对应的多个基本三维模型，包括：

基于所述文本标签和所述几何特征，在所述三维基本模型数据库中召回与所述模块对应的多个基本三维模型；

所述对所述基本三维模型进行图像处理，得到与多个所述基本三维模型对应的多个二维图片，包括：

基于所述视角特征和所述图片纹理特征，分别对所述基本三维模型进行视角调整和纹理渲染，得到与多个所述基本三维模型对应的多个二维图片。

4.根据权利要求1所述的孪生三维模型生成方法，其特征在于，所述基于所述模块与多个所述二维图片，确定与所述模块对应的孪生基本三维模型，包括：

基于所述模块与多个所述二维图片，通过相似度计算分别确定所述模块与各所述二维图片的相似值，以及通过协同过滤计算分别确定所述模块与各所述二维图片的相似推荐值；

基于所述相似值和所述相似推荐值，生成与所述模块对应的候选三维模型概率分布；

基于所述候选三维模型概率分布，确定与所述模块对应的孪生基本三维模型。

5.根据权利要求4所述的孪生三维模型生成方法，其特征在于，在所述得到与多个所述基本三维模型对应的多个二维图片之后，所述方法还包括：

基于条件随机场的模块间共现约束模型，确定相关联所述模块间的关联概率；

所述基于所述相似值和所述相似推荐值，生成与所述模块对应的候选三维模型概率分布，包括：

基于所述相似值、所述相似推荐值以及所述关联概率，生成与所述模块对应的候选三维模型概率分布。

6.根据权利要求5所述的孪生三维模型生成方法，其特征在于，所述基于所述相似值、所述相似推荐值以及所述关联概率，生成与所述模块对应的候选三维模型概率分布，包括：

基于所述相似值、所述相似推荐值以及所述关联概率的加权平均值，确定与所述模块对应的候选三维模型概率分布，其中，在加权计算过程中的权重值为超参数。

7.根据权利要求1所述的孪生三维模型生成方法，其特征在于，所述基于所述模块与多个所述二维图片，确定与所述模块对应的孪生基本三维模型，包括：

响应于用户在多个所述二维图片中选择目标二维图片，确定目标基本三维模型为与所述模块对应的孪生基本三维模型，其中，所述目标基本三维模型为与所述目标二维图片对应的基本三维模型。