[发明专利]使用环境上下文回答问题

说明书

相关申请的交叉引用

本申请要求以下美国专利申请的权益，在此通过引用合并其全部内容：2012年9月10目提交的，专利申请号为No.61／698,934的美国临时专利申请；2012年9月10日提交的，专利申请号为No.61／698,949的美国临时专利申请；2012年9月25日提交的，专利申请号为No.13／626,439的美国专利申请；2012年9月25日提交的，专利申请号为No.13／626,351的美国专利申请；以及2013年2月15日提交的，专利申请号为No.13／768,232的美国专利申请。

技术领域

本说明书涉及标识基于自然语言查询和环境信息的查询结果，例如使用环境信息作为上下文来回答问题。

背景技术

通常，搜索查询包括当用户请求搜索引擎执行搜索时用户提交给搜索引擎的一个或多个术语。除了其它方式之外，用户可以通过在键盘上打字或在话音查询的上下文中通过将查询术语口述到移动设备的麦克风中来录入搜索查询的查询术语。可以使用语音识别技术来处理话音查询。

发明内容

根据本说明书中描述的主题的一些创新方面，环境信息(诸如环境噪声)可以辅助查询处理系统回答自然语言查询。例如，用户可以询问关于他们正在收看的电视节目的问题，诸如“这部电影中的演员是谁?”。用户的移动设备检测用户的发声(utterance)和环境数据，环境数据可以包括电视节目的配乐音频。移动计算设备将发声和环境数据编码为波形数据，并将该波形数据提供给基于服务器的计算环境。

计算环境将发声从波形数据的环境数据分离，并且继而获取发声的转写文本。计算环境诸如通过标识电影的名称进一步标识与环境数据和发声相关的实体数据。计算环境继而可以从转写文本和实体数据标识一个或多个结果，例如，响应于用户的问题的结果。特别地，一个或多个结果可以包括对用户的“这部电影中的演员是谁”的问题的回答(例如，演员的姓名)。计算环境可以向移动计算设备的用户提供这种结果。

本说明书中所描述的主题的创新方面可以体现于方法中，该方法包括以下动作：接收编码发声和环境数据的音频数据，获取发声的转写文本，使用环境数据标识实体，向自然语言查询处理引擎提交查询，其中查询至少包括转写文本的—部分和标识实体的数据，以及获取查询的一个或多个结果。

这些方面的其它实施方式包括对应的系统、装置和在计算机存储设备上编码的计算机程序，其被配置为执行方法的动作。

这些和其它实施方式可以各自可选地包括下列特征中的一个或多个特征。例如，输出结果中的至少一个结果的表示。进一步使用发声标识实体。生成查询。生成查询包括将转写文本与标识实体的数据关联。关联进一步包括使用标识实体的数据标记转写文本。关联进一步包括使用标识实体的数据代替转写文本的一部分。代替进一步包括使用标识实体的数据代替转写文本的一个或多个单词。接收环境数据进一步包括接收环境音频数据、环境图像数据或者二者。接收环境音频数据进一步包括接收包括背景噪声的附加的音频数据。

根据本发明书中描述的主题的一些创新方面，基于环境音频数据和口述的自然语言查询标识媒体内容的项目。例如，用户可以询问关于他们正在收看的电视节目的问题，诸如“我们正在观看什么?”。问题可以包括关键词，诸如“观看”，其建议问题是关于电视节目而不是一些其它类型的媒体内容。用户的移动设备检测用户的发声和环境数据，环境数据可以包括电视节目的配乐音频。移动计算设备将发声和电视环境数据编码为波形数据，并将该波形数据提供给基于服务器的计算环境。

计算环境将发声与波形数据的环境数据分离，并且继而处理发声以获得发声的转写文本。计算环境从该转写文本检测任意特定内容类型的关键词，诸如关键词“观看”。计算环境可以继而基于环境数据标识媒体内容的项目，并可以从标识的项目选择媒体内容的特定项目，其与和关键词关联的特定内容类型匹配。计算环境向移动计算设备的用户提供媒体内容的特定项目的表示。

本说明书中描述的主题的创新方面可以体现于方法中，其包括以下动作：接收(i)编码口述自然语言查询的音频数据，以及(ii)环境音频数据，获取口述自然语言查询的转写文本，确定与转写文本中的一个或多个关键词关联的特定内容类型，向内容识别引擎提供至少环境音频数据的一部分，标识已经由内容识别引擎输出并匹配特定内容类型的内容项目。

这些方面的其它实施方式包括对应的系统、装置和在计算机存储设备上编码的计算机程序，其被配置为执行方法的动作。