[发明专利]虚拟人情感能力表现输出方法及系统

说明书

本发明提供一种虚拟人情感能力表现输出方法，其包含以下步骤：获取多模态输入数据；调用机器人能力接口解析多模态输入数据，提取多模态输入数据中的情感要素；根据解析结果决策并生成多模态输出数据，其中，多模态输出数据包含情感数据，情感数据包含虚拟人眼部变化以及虚拟人皮肤肌理反应的展示数据；通过虚拟人的形象输出多模态输出数据。本发明提供的虚拟人情感能力表现输出方法及系统能够根据虚拟人的基础情绪表现输出匹配的展示数据，例如不同的眼部变化以及不同的皮肤肌理反应等，还能够在输出虚拟人情感时配合不同的泪腺作用。并且，本发明还能够根据输出时间以及程度值的变化来协助表现虚拟人的情感输出，提升了用户的交互体验。

技术领域

本发明涉及人工智能领域，具体地说，涉及一种虚拟人情感能力表现输出方法及系统。

背景技术

机器人聊天交互系统的开发致力于模仿人类对话。早期应用比较广泛的聊天机器人应用程序包括小i聊天机器人或是苹果手机上的siri聊天机器人等处理所接收到的输入(包括文本或语音)并根据输入做出相应的响应，以试图在上下文之间模仿人类之间的交互。

然而，要想完全模仿人类进行多模态交互，在输出多模态输出数据时丰富多模态交互的内容，提升用户的交互体验，现有的这些机器人聊天系统远远达不到要求。

因此，本发明提供了一种虚拟人情感能力表现输出方法及系统。

发明内容

为解决上述问题，本发明提供了一种虚拟人情感能力表现输出方法，所述方法包含以下步骤：

获取多模态输入数据；

调用机器人能力接口解析所述多模态输入数据，提取所述多模态输入数据中的情感要素；

根据解析结果决策并生成多模态输出数据，其中，所述多模态输出数据包含情感数据，所述情感数据包含虚拟人眼部变化以及虚拟人皮肤肌理反应的展示数据；

通过所述虚拟人的形象输出所述多模态输出数据。

根据本发明的一个实施例，所述虚拟人具有基础情绪表现，其中，所述基础情绪表现包含但不限于：生气、大笑、害羞、悲伤、含泪以及哭泣。

根据本发明的一个实施例，通过所述虚拟人的形象输出所述多模态输出数据的步骤还包含以下步骤：

根据所述虚拟人的基础情绪表现输出与所述基础情绪表现匹配的所述虚拟人眼部变化以及所述虚拟人皮肤肌理反应的展示数据。

根据本发明的一个实施例，通过所述虚拟人的形象输出所述多模态输出数据的步骤还包含以下步骤：

输出皮肤肌理反应以及泪腺作用；

或者，

在输出所述情感数据时配合所述虚拟人的皮肤肌理反应以及泪腺作用。

根据本发明的一个实施例，在输出所述情感数据时配合所述虚拟人的皮肤肌理反应以及泪腺作用的步骤还包含以下步骤：

在第一预设时间节点输出第一预设程度值的所述皮肤肌理反应以及所述泪腺作用；

所述第一预设时间节点早于所述多模态输出数据中的语音输出时间节点。

根据本发明的一个实施例，通过所述虚拟人的形象输出所述多模态输出数据的步骤还包含以下步骤：

在第二预设时间节点输出第二预设程度值的所述情感数据。

根据本发明的另一个方面，还提供了一种存储介质，其上存储有可执行以上任一项所述的方法步骤的程序代码。

根据本发明的另一个方面，还提供了一种虚拟人情感能力表现输出装置，所述装置包含：

获取模块，其用于获取多模态输入数据；