[发明专利]多媒体数据的处理方法、装置、电子设备及存储介质

说明书

本申请实施例提供了一种多媒体数据的处理方法、装置、电子设备及存储介质，涉及人工智能领域中的计算机视觉技术、自然语言处理技术以及机器学习。该方法包括：获取第一多媒体数据和第二多媒体数据；获取第一多媒体数据对应的第一图像和第一文本信息，以及第二多媒体数据对应的第二图像和第二文本信息；确定第一图像和第二图像的图像相似度，以及确定第一文本信息和第二文本信息的文本相似度；基于图像相似度和文本相似度，确定第一多媒体数据和第二多媒体数据的相似度。本申请所提供的技术方案，通过多媒体数据对应的图像的图像相似度和文本信息对应的文本相似度，来确定多媒体数据的相似度，由此得到的多媒体数据的相似度的准确性更高。

技术领域

本申请涉及计算机技术领域，具体而言，本申请涉及一种多媒体数据的处理方法、装置、电子设备及存储介质。

背景技术

随着多媒体信息技术和网络通信技术的发展，在线观看包含图片、文本形式的多媒体数据已经深入到人们的日常生活当中。用户可以通过各种多媒体数据发布平台观看多媒体数据，多媒体数据的内容也多种多样，包括新闻、娱乐、旅游、商品销售、艺术欣赏等，用户通过观看多媒体数据了解各类信息，使得信息获取更加便捷。

在对多媒体数据进行处理时，例如，对多媒体数据内容进行聚类、搜索，以及根据已有多媒体数据推送相关的多媒体数据时，都需要计算多媒体数据之间的相似度。现有技术中，计算多媒体数据的相似度时，通过标题来计算相似度，认为两个标题之间相似度高的多媒体数据内容也具有较高相似度，但是该方式的判断结果通常不够准确。

发明内容

本申请提供了一种多媒体数据的处理方法、装置及电子设备，可以解决现有技术中存在的问题。

本申请实施例提供的具体技术方案如下：

一方面，本申请实施例提供了一种多媒体数据的处理方法，该方法包括：

获取第一多媒体数据和第二多媒体数据；

获取第一多媒体数据对应的第一图像和第一文本信息，以及第二多媒体数据对应的第二图像和第二文本信息；

确定第一图像和第二图像的图像相似度，以及确定第一文本信息和第二文本信息的文本相似度；

基于图像相似度和文本相似度，确定第一多媒体数据和第二多媒体数据的相似度。

另一方面，本申请实施例提供了一种多媒体数据的处理方法，该方法包括：

获取待处理的多个多媒体数据；

确定多个多媒体数据之间的相似度；

根据相似度对多个多媒体数据进行相应的处理；

其中，相似度是根据本申请第一方面所示的方法确定的。

本发明实施例还提供了一种多媒体数据的处理装置，该装置包括：

第一获取模块，用于获取第一多媒体数据和第二多媒体数据；

第二获取模块，用于获取第一多媒体数据对应的第一图像和第一文本信息，以及第二多媒体数据对应的第二图像和第二文本信息；

第一确定模块，用于确定第一图像和第二图像的图像相似度，以及确定第一文本信息和第二文本信息的文本相似度；

第二确定模块，用于基于图像相似度和文本相似度，确定第一媒体数据和第二多媒体数据的相似度。

本发明实施例还提供了一种多媒体数据的处理装置，该装置包括：

获取模块，用于获取待处理的多个多媒体数据；

确定模块，用于确定多个多媒体数据之间的相似度；

处理模块，用于根据相似度对多个多媒体数据进行相应的处理；