[发明专利]一种语义与图像匹配处理方法、装置及终端设备

说明书

技术领域

本发明涉及图像信息处理领域，特别是指一种语义与图像匹配处理方法、装置及终端设备。

背景技术

随着互联网和移动互联网的发展，即时通讯，微博，社区都成为人们在线交流的主要平台。目前，在互联网和移动互联网上的主流的交流方式是以文字和语音的形式为主。

用图片进行表达和交流的情况主要体现在：聊天或发表文章时应用的非个性化卡通形象表情，卡通形式的礼物，或照片。这种图像表达形式，是非个性化的，即没有用户本人的形象参与到图像中进行的表达，使图像不能丰富准确地表达用户的意思。而且也无法体现用户人本在图像中的参与。

当前图片的使用都是用户手动拼接图片或扫描上传人工画好的图片和照片。人们在表达自己的意思的时候，如果有配图需求，则需要通过在网上或自己的图库中找到自己满意的图片。这样，一是效率低下，二是很难找到自己满意的图片。通常，图片和文字不相匹配，达不到图文并茂的效果。

发明内容

本发明要解决的技术问题是提供一种语义与图像匹配处理方法、装置及终端设备，可以得到与语义相匹配的图像，达到图文并茂的效果。

为解决上述技术问题，本发明的实施例提供一种语义与图像匹配处理方法，包括：

获得输入的语句；

对所述语句进行语义分析，得到多个特征词；

根据所述特征词，从图像元素库中查找与所述特征词相匹配的图像元素；

按照所述多个特征词之间的语义关系，确定与所述特征词相匹配的图像元素之间的组合顺序；

按照所述组合顺序，将与所述特征词相匹配的图像元素组合成一新的图像。

其中，所述语句为：文字形式的语句，或者语音形式的语句，或者将输入的语音转换成文字形式的语句。

其中，对所述语句进行语义分析，得到多个特征词的步骤包括：

判断所述语句是否是常见短语，若是，将所述常见短语作为所述特征词；若否，对所述语句按照标点符号进行断句分割，得到多个短句；

对所述短句按照虚词进行分割，得到多个特征词。

其中，根据所述特征词，从图像元素库中查找与所述特征词相匹配的图像元素的步骤包括：

根据所述特征词，从图像元素库中查找图像元素的名称包括所述特征词的图像元素，若查找到，则认为该查找到的至少一个图像元素与所述特征词匹配。

其中，从所述查找到的至少一个图像元素中，确定图像元素的名称与所述特征词完全相同的图像元素为与所述特征词相匹配的图像元素，否则，从所述查找到的至少一个图像元素中任选一个图像元素作为与所述特征词相匹配的图像元素。

其中，按照所述多个特征词之间的语义关系，确定与所述特征词相匹配的图像元素之间的组合顺序的步骤包括：

按照所述多个特征词之间的语义关系，将与所述特征词相匹配的图像元素分为多层；

按照图像元素显示的效果，确定与所述特征词匹配的多层图像元素之间的组合顺序。

其中，与所述特征词匹配的图像元素之间的组合顺序为至少一种。

其中，按照所述组合顺序，将与所述特征词相匹配的图像元素组合成一新的图像的步骤包括：

按照所述组合顺序，依次获得所述组合顺序中，与所述特征词匹配的所有图像元素对应的显示区域；

按照所述显示区域确定的位置，将所述图像元素显示在所述显示区域中；

将所有显示区域中显示的所述图像元素组合成所述新的图像。

其中，所述图像元素库包括：第一人称相应的特征词对应的图像元素；

所述图像元素为：平面图像、动态图像和/或三维图像。

本发明的实施例还提供一种语义与图像匹配处理装置，包括：

输入模块，用于获得输入的语句；

分析模块，用于对所述语句进行语义分析，得到多个特征词；

匹配模块，用于根据所述特征词，从图像元素库中查找与所述特征词相匹配的图像元素；

确定模块，用于按照所述多个特征词之间的语义关系，确定与所述特征词相匹配的图像元素之间的组合顺序；

图像生成模块，用于按照所述组合顺序，将与所述特征词相匹配的图像元素组合成一新的图像。

其中，所述确定模块包括：

划分模块，用于将图像元素库中的图像元素分为多层；

第一确定子模块，用于按照图像元素显示的效果，确定多层图像元素之间的组合顺序；

第二确定子模块，用于按照多层图像元素之间的组合顺序，确定与所述特征词匹配的图像元素之间的组合顺序。