[发明专利]用于处理多模式输入的电子装置、方法和服务器

说明书

提供一种用于处理多模式输入的电子装置、方法和服务器。所述电子装置包括：壳体；触摸屏显示器，通过壳体的第一部分暴露；麦克风，布置在壳体的第二部分；扬声器，布置在壳体的第三部分；存储器，布置在壳体内部；处理器，布置在壳体内部，并电连接到显示器、麦克风和扬声器和存储器。存储器被配置为存储多个应用程序，所述多个应用程序中的每个应用程序包括图形用户界面(GUI)。

本申请要求于2016年11月28日提交的第10-2016-0159704号韩国专利申请的优先权，该韩国专利申请的内容通过引用包含于此。

技术领域

本公开涉及一种用于处理用于接收用户的各种输入的多模式输入(multi-modalinput)的电子装置。更具体地讲，本公开涉及一种用于处理多模式输入的方法和用于处理多模式输入的服务器。

背景技术

除了使用键盘或鼠标的输入方案之外，电子装置最近已支持根据相关技术的各种输入方案(诸如，语音输入等)。例如，诸如智能电话或平板个人计算机(PC)的电子装置可在执行语音识别服务的状态下识别用户的语音输入，并且可执行与语音输入对应的行动或可提供根据语音输入找到的结果。

如今，语音识别服务正在基于处理自然语言的技术被开发。处理自然语言的技术表示抓取(grasp)用户的话语的意图并向用户提供适合于该意图的结果的技术。

以上信息作为背景信息被呈现，仅用于辅助对本公开的理解。关于以上中的任意一个是否可适用作为针对本公开的现有技术，没有进行确定并且没有进行声明。

发明内容

由于当根据相关技术识别和处理用户语音时语音识别服务仅提供基于用户输入的结果，因此根据相关技术，语音识别服务可仅处理简单的用户输入(诸如，执行一个程序)，并且不可处理用于执行多个应用的用户输入。

根据相关技术，在用户输入包括不充足信息的语音的情况下，语音识别服务可由于不充足的信息而不识别用户语音，并且不可识别整个用户输入。例如，在语音识别服务仅通过使用用户的话语而难以抓取用户的意图的情况下，语音识别服务可通过使用用户的额外的话语或终端的信息来抓取最佳的意图。在确定用户的意图之后，语音识别服务可执行适用于抓取的意图的服务(例如，搜索、执行应用)或任务。如果在用户的第一话语之后用户重复地接收到针对额外话语的请求，则用户难以抓取针对额外话语请求的意图。此外，如果当最初执行语音识别服务时用户重复地接收到该请求，则用户将察觉到难以使用该服务。

响应于语音输入(指令)提供结果的语音识别服务难以提供其他输入方式。例如，用户可利用各种输入方式(诸如，键盘和鼠标或者触摸输入)。然而，由于语音识别服务的接口主要由语音的输入/输出构成，因此用户难以利用除了语音之外的输入方式。

本公开的方面将至少解决以上提及的问题和/或缺点，并将至少提供以下描述的优点。因此，本公开的一个方面在于提供一种语音输入处理方法，该语音输入处理方法是用于与语音输入以及输入方式(例如，键盘、鼠标、触摸输入等)整体起作用的输入方式。

因此，本公开的另一方面在于提供一种通过基于各种输入方式的集成接口处理自然语言的方法。

因此，本公开的另一方面在于提供一种能够在执行与用户的第一话语对应的服务或任务的同时接收用户的额外输入的接口和系统。