[发明专利]一种基于混合现实的店铺展示方法、系统、设备和介质

说明书

本发明提出了一种基于混合现实的店铺展示方法、系统、设备和介质，包括：获取店铺多个角度的深度图像信息，并基于所述深度图像信息获取多个特征物体；识别所述特征物体的参数，根据所述特征物体及对应参数输入数据训练库进行学习；建立所述店铺的三维立体模型；对训练学习后的所述特征物体建立三维模型，并根据所述特征物体的参数插入到所述店铺的三维立体模型的对应位置处得到店铺混合现实三维立体模型；将所述店铺混合现实三维立体模型叠加到真实的店铺环境中进行展示。通过采集线下店铺的图像信息并建立三维模型，并结合混合现实技术使得用户可以在线上真实体验线下实体店，用户可以真实观看及感受不同的商品而进行选购。

技术领域

本发明涉及计算机视觉技术领域，尤其涉及一种基于混合现实的店铺展示方法、系统、设备和介质。

背景技术

随着网络时代的发展，越来越多的线上店铺取代了线下实体店铺，线上店铺作为电子商务的一种形式，是一种能够让人们在浏览的同时进行购买，且通过各种在线支付手段进行支付完成交易的网站。

但大多的线上店铺都难以避免的一个问题是，因为都是线上选购商品，极易出现买家到手的商品与在线上展示的商品不一致的问题。用户无法真实的像在逛实体店一样感受商品的材质及颜色、尺寸，从而会造成用户期待值与实际值偏差，以使用户体验感差。

因此亟待提出一种店铺展示方法，使用户可以在线上实现等同于在线下真实看店的方法。

发明内容

基于此，有必要针对上述问题，提出一种基于混合现实的店铺展示方法、系统、设备和介质，以使用户可以在线上实现等同于在线下看店的真实体验。

第一方面，提供一种基于混合现实的店铺展示方法，包括：

获取店铺多个角度的深度图像信息，并基于所述深度图像信息获取多个特征物体；

识别所述特征物体的参数，根据所述特征物体及对应参数输入数据训练库进行学习；

建立所述店铺的三维立体模型；

对训练学习后的所述特征物体建立三维模型，并根据所述特征物体的参数插入到所述店铺的三维立体模型的对应位置处得到店铺混合现实三维立体模型；

将所述店铺混合现实三维立体模型叠加到真实的店铺环境中进行展示。

作为优选的，将所述混合现实三维立体模型叠加到真实的店铺环境中进行展示之后还包括：

获取用户的人体三维模型；

将人体三维模型建立空间坐标系，并将所述空间坐标系与所述店铺的混合现实三维立体模型的建立关联，并将人体三维模型基于所述空间坐标系与所述店铺的混合现实三维立体模型绑定；

基于用户在混合现实环境中的交互手势，改变所述特征物体的展示状态。

作为优选的，根据所述人体三维模型计算用户身高信息、人体骨骼信息及皮肤状态信息，基于所述身高信息、人体骨骼信息及皮肤状态信息，向用户推荐所述店铺内展示的所述特征物体。

作为优选的，识别所述特征物体的参数，根据所述特征物体及对应参数输入数据训练库进行学习，包括：

所述特征物体的参数至少包括尺寸信息、位置信息、标识信息；

将所述尺寸信息、位置信息、标识信息输入数据训练库进行学习，并采用聚类算法对多个特征物体进行分类筛选。

作为优选的，根据分类筛选后的多个特征物体分别建立三维模型，对于尺寸信息及标识信息一致的特征物体建立相同的三维模型，再基于不同的位置信息插入到店铺的三维立体模型的对应位置处。

作为优选的，建立所述店铺混合现实三维立体模型，包括：