[发明专利]多媒体图像系统的信息继承和叠加方法

权利要求书

1.多媒体图像系统的信息继承和叠加方法，其特征在于：所述的多媒体图像是在图像上设置一个或多个信息点，并采用多媒体数据对各个信息点进行描述，然后将图像与各个信息点对应的多媒体数据合并存储；所述的多媒体数据是文字、音频、图像、视频，四种数据之中一种或多种的任意组合；其中，信息点是与图像中特定的点位或局部区域的特征图像相对应的；当用户浏览多媒体图像时，首先看到的是图像，然后选择图像中各个信息点对应的局部区域位置，即能够播放与该信息点对应的多媒体数据；

所述的多媒体图像系统包括多媒体图像基础数据库和用户自制多媒体图像；采用自动检索和处理方法，或/和，人工检索和处理方法进行处理；

所述的自动检索和处理方法，其中自动检索是指提取用户图像中的景、物、人，与多媒体图像基础数据库中的基础图像进行自动匹配操作、识别图像特征，即自动查找是否有包含相同的景、物、人的基础图像；所述的自动检索和处理方法至少包括以下步骤：

S101、收集基础图像、准备多媒体素材，然后将基础图像与多媒体素材相关联、制作多媒体图像基础数据库；

S102、通过图像识别算法对用户的普通图像进行图像分割、识别，提取若干个相对独立的图像局部区域；或者由用户手工选取若干个图像局部区域；然后将各个图像局部区域分别与多媒体图像基础数据库中的基础图像数据进行交叉比对，匹配图像特征；

S103、将普通图像的匹配成功的图像局部区域设定为信息点，依次将多媒体图像基础数据中包含的已匹配的信息点的多媒体数据或整幅多媒体图像叠加复制到用户提供的普通图像之中、并与相对应的信息点进行关联，使得用户的普通图像升级为用户多媒体图像；

S104、用户对用户多媒体图像进行个性化的浏览和编辑，即对其中的信息点和多媒体数据进行操作，具体操作是增加、修改、删除之中一种或多种的任意组合；

S105、最终，形成具有与该用户图像的情境相对应的、记载有用户个性化多媒体信息点的用户自制多媒体图像，便于随时浏览；

所述的人工检索和处理方法，其中人工检索是指提取用户图像中的景、物、人，再由用户输入与其相关的关键词，在多媒体图像基础数据库中查找包含关键词描述的基础图像、由用户确认后完成匹配；所述的人工检索和处理方法至少包括以下步骤：

S201、收集基础图像、准备多媒体素材，然后将基础图像与多媒体素材相关联、制作多媒体图像基础数据库；

S202、用户准备用于表达某种主题思想的普通图像，并对图像中的特定的点位或局部区域进行标记、形成若干个信息点；

S203、用户根据各个信息点所要表达的含义，对多媒体图像基础数据库进行个性化检索、找到符合要求的多媒体数据素材，然后将已选择的多媒体数据或整幅多媒体图像叠加复制到用户提供的普通图像之中、并与相对应的信息点进行关联；并对各个信息点进行操作，具体操作是增加、修改、删除之中一种或多种的任意组合；

S204、最终，形成以多媒体图像基础数据库为基础的、突出用户所希望表达的主题思想的记载个性化多媒体信息点的用户自制多媒体图像，便于随时浏览。

2.根据权利要求1所述的多媒体图像系统的信息继承和叠加方法，其特征在于：当用户自制多媒体图像的信息点关联的是多媒体图像时，则查阅该信息点时首先显示该被关联的多媒体图像，然后可以继续选择该被关联的多媒体图像之中的信息点进行进一步的浏览，依此类推。

3.根据权利要求1所述的多媒体图像系统的信息继承和叠加方法，其特征在于：在制作多媒体图像基础数据库时，支持对同一个景物进行从多个角度，或/和，多个位置，或/和，多个局部区域，或/和，多个时间节点分别进行图像采集，从而形成一组基础图像，或者对该景物进行3D建模，然后完成与信息点的关联；在所述的S102步骤的匹配过程中，不仅支持用户图像与基础图像的一对一匹配，也可以用户图像与基础图像一对多或多对多的匹配；从而实现用户图像与基础图像的快速匹配；所述的匹配过程采用深度学习图像识别算法，如果匹配结果有误、可由用户核对之后进行重新匹配。

4.根据权利要求1所述的多媒体图像系统的信息继承和叠加方法，其特征在于：对于描述各个信息点的多媒体数据设置类别标签，便于用户快速挑选其感兴趣的信息；并且，用户可以设定自己的偏好，系统根据用户偏好和类别标签进行对比分析、优先展示用户感兴趣的信息点，从而便于用户浏览。