[发明专利]确定在中断第二会话的中止后是否自动恢复第一自动助理会话

说明书

确定在中断并取代了先前的第一自动助理会话的第二自动助理会话的中止后是否执行以下操作：(1)自动恢复所述先前的第一自动助理会话，或(2)转变成所述先前的第一会话不被自动恢复的替代自动助理状态。实施方式还涉及基于所述确定和在所述第二自动助理会话的中止后，选择性地使被中断的所述先前的第一自动助理会话自动恢复或转变成所述第一会话不被自动恢复的所述状态。

背景技术

人类可以使用在此称为“自动助理”(也称为“聊天机器人”、“交互式个人助理”、“智能个人助理”、“个人语音助理”、“谈话代理”等)的交互式软件应用参与人机对话。例如，人类-当他们与自动助理交互时他们可以称为“用户”-可以使用自由形式的自然语言输入来提供命令、查询和/或请求。自由形式的自然语言输入可以包括使用自动语音识别转换为文本的有声话语和/或键入的自由形式的自然语言输入。

为用户提供与自动助理进行有声地接洽的能力的独立语音响应扬声器变得越来越普遍。除了可能包括静音按钮、用于调整音量的触敏接口等之外，这些设备通常只能包括对(多个)麦克风补充的很少的硬件输入机构。这些扬声器的目标是允许用户轻松地与自动助理进行有声地接洽，而无需用户与某些用户界面元素(诸如键盘或鼠标)进行物理交互以执行各种任务。

传统的独立语音响应扬声器通常缺少完整的显示器。这些传统的独立语音响应扬声器最多趋向于包括相对简单的视觉输出机构，诸如发光二极管等，这些相对简单的视觉输出机构能够利用基本的颜色和/或动画来传达简单的消息。下一代的独立语音响应扬声器可以包括更稳健的视觉输出机构，诸如显示器或甚至触摸屏显示器。与独立的语音响应扬声器相反，这些设备在本文中将被称为“独立的多模态助理设备”。与传统的独立交互式扬声器的情况一样，独立的多模态助理设备可以被设计成与键盘、鼠标或其他复杂的物理输入组件有声地交互，并且通常将不包括键盘、鼠标或其他复杂的物理输入组件。然而，独立的多模态助理设备通常将包括用于有声交互的(多个)麦克风和用于经由经由触摸屏接收到的各种触摸输入进行交互的触摸屏。

发明内容

通过独立多模态助理设备，与这些设备进行接洽的用户通常可以使用触摸输入或口头话语来与设备进行交互。此外，当用户相对靠近设备(例如，在几英尺附近或在几英尺内)、相对远离设备(例如，超过十英尺远)时或甚至在他们绕环境移动时，用户可以与设备进行接洽。例如，用户可以与多模态助理设备进行接洽以在执行多步骤任务(诸如安装和配置新智能恒温器)中寻求辅助。在执行任务期间，用户可以经由触摸输入和/或口头输入与多模态助理设备进行交互，以使多模态助理设备在听觉上和/或在图形上渲染各种步骤和/或与安装和配置新智能恒温器有关的其他指导。当提供这种输入时和/或当查明由多模态助理设备渲染的内容时，用户可以在整个环境中移动。因此，用户相对于设备的显示器的视点可能改变，从而影响用户观看经由显示器渲染的内容的能力。此外，用户的改变位置可能影响他/她听到经由多模态设备的(多个)扬声器在听觉上渲染的任何内容的能力。

鉴于这些和其他考虑，本文中所公开的实施方式在与用户的活动会话期间仅渲染与该活动会话相关的内容。例如，响应于“walk me through installing smartthermostat X(指导我安装智能恒温器X)”的口头话语，独立多模态助理设备的显示器和该设备的(多个)扬声器可以排他地渲染与安装且配置“智能恒温器X”有关的内容。换句话说，任何先前渲染的内容可以被活动会话的内容完全取代。例如，假设响应于“today’sweather forecast(今天的天气预报)”的先前口头话语，在先前的会话中在显示器上渲染了每日天气预报。可以响应于“walk me through installing smart thermostat X”的口头话语在新活动会话中通过与“智能恒温器X”安装有关的视觉内容来取代天气预报的显示。以这些和其他方式，针对活动会话的内容的渲染可以利用多模态助理设备的显示器和/或(多个)扬声器的全部范围，而无需“分割”显示器来呈现来自两个会话的内容，而没有同时渲染来自两个不同会话的音频(例如，其中一个会话处于“较低”音量)。除了通过防止来自两个会话的内容的同时渲染来节省资源之外，这种情况还可以使得用户能够更容易且更快速地查明活动会话中的内容，从而有可能缩短活动会话的持续时间。