[发明专利]数字助手在通信中的使用

摘要

在设备（110）上操作的数字助手（350）被配置为通过监听语音和视频呼叫（205）并参与消息传送会话而作为主动参与者参加到在本地方（105‑1）和远程方（105‑N）之间的通信中。数字助手典型地可以通过使用关键词或短语（1205）的语音而被发起，并且然后使用语音或手势请求数字助手执行任务、提供信息和服务等。数字助手可以对请求做出响应并且采取适当的动作（1210）。在语音和视频呼叫中，与数字助手的交互（即，请求、响应和动作）可以被呼叫双方听到，就好像数字助手是呼叫中的第三方那样。在消息传送会话中，生成消息并且将其显示给每一个参与者，以使得他们可以看到与数字助手的交互，就好像它是参与者那样。

主权项

1.一种设备，包括：/n一个或多个处理器；/n显示器，所述显示器支持用于与所述设备的用户交互的用户接口(UI)；以及/n存储器设备，所述存储器设备存储计算机可读指令，所述计算机可读指令在由所述一个或多个处理器执行时执行方法，所述方法包括步骤：/n监听本地方和远程方之间的视频呼叫的音频部分；/n进入监听模式，在关键词或关键短语被说出之后，通过所述监听模式启用在所述音频部分中监听所述本地方的言语；/n响应于所述言语而确定动作，所述确定包括定位可应用上下文以及利用所定位的可应用上下文；/n通过在所述视频呼叫的所述音频部分注入宣布来对所确定的动作进行宣布，以使能所述本地方和所述远程方两者都能听到所述宣布；/n采取所确定的动作；/n返回到所述监听模式；以及/n生成被包括在来自所述设备的外出视频流中的覆盖，所述覆盖包括所述本地方和数字助理之间的交互的表示，或者所述覆盖包括所述数字助理的状态的表示。/n