[发明专利]基于情感-认知负荷的数字助理

说明书

本公开的实施方案阐述了一种计算机实施的方法，该方法包括：从至少一个传感器接收与环境相关联的传感器数据；基于传感器数据来计算与该环境内的用户相关联的认知负荷；基于传感器数据计算与用户的情绪状态相关联的情感负荷；基于认知负荷和情感负荷两者，确定情感‑认知负荷；基于情感‑认知负荷来确定与用户相关联的用户准备状态；并且基于用户准备状态使一个或多个动作发生。

技术领域

各种实施方案通常涉及数字助理，且更具体地，涉及基于情感-认知负荷的数字助理。

背景技术

各种数字系统包括辅助用户执行任务的数字助理。例如，各种车辆包括协助驾驶员操纵车辆的高级驾驶员辅助系统(ADAS)。这样的ADAS可包括驾驶员监视系统(DMS)，该驾驶员监视系统监视驾驶员以便评估驾驶员对车辆的操纵，并且使ADAS能够通过提供各种水平的辅助(诸如，通过生成通知、自动执行各种驾驶任务等)来对驾驶员的状态作出响应。

与给定环境进行交互时，用户通常将焦点分散在多个对象之间。例如，驾驶员可能将焦点分散在驾驶车辆和与另一人进行对话之间。在某些情况下，驾驶员可能无法适当地进行调整以足够聚焦于驾驶任务以便充分应对诸如交通变拥挤、天气状况糟糕、意外障碍物等偶发的复杂驾驶情况。

通常，ADAS可轻松地检测分散注意力的对象，并且可确定驾驶员是否聚焦在道路上。然而，驾驶员监视系统可能无法确定驾驶员在执行驾驶任务时的聚焦程度。例如，DMS可包括用于确定驾驶员的眼睛是否聚焦于道路的相机，但是DMS可能不考虑会原本减轻对成功执行驾驶任务的聚焦的其他对象和刺激。因此，ADAS可能无法有效地辅助驾驶员，并且驾驶员可能无法改变自己的行为以正确地处理必要的驾驶任务。

鉴于以上问题，用于监视用户在环境中交互的状态的更有效的技术将是有用的。

发明内容

一个实施方案提出了一种计算机实施的方法，该方法包括：从至少一个传感器接收与环境相关联的传感器数据；基于传感器数据来计算与该环境内的用户相关联的认知负荷；基于传感器数据计算与用户的情绪状态相关联的情感负荷；基于认知负荷和情感负荷两者，确定情感-认知负荷；基于情感-认知负荷来确定与用户相关联的用户准备状态；并且基于用户准备状态导致发生一个或多个动作。

其他实施方案尤其提供了被配置成实施上述计算机可读存储介质的方法和系统。

相对于先前的数字助理系统，所公开技术的至少一个技术优势在于，基于估计用户的认知负荷以及用户的情绪状态的直接测量的组合来计算用户准备状态提供了对用户处理一个或多个任务的能力的更准确的指示。

附图说明

为了能够详细地理解上面阐述的各种实施方案的所述特征的方式，可通过参考各种实施方案来对上面简要概述的发明思想进行更具体的描述，附图中示出了各种实施方案中的一些。然而，注意的是，附图只示出本发明思想的典型实施方案，且因此不应被认为以任何方式限制范围，且存在其它等效的实施方案。

图1示出了被配置为实施本公开的一个或多个方面的用户准备系统的框图。

图2示出了根据各种实施方案的被配置为实施图1的用户准备系统的车辆的乘客舱。

图3示出了根据各种实施方案的图1的用户准备应用的框图。

图4A示出了根据各种实施方案的与图1的用户准备应用相关联的情感-认知负荷值的示例性查找表。

图4B示出了根据各种实施方案的与图1的用户准备应用相关联的情感-认知负荷值的另一示例性查找表。

图5示出了根据各种实施方案的从由图1的用户准备应用所得出的各个生物计量值计算出的情感-认知负荷。

图6示出了根据各种实施方案的包括图3的基于情感-认知负荷的数字助理的示例性车辆系统。