[发明专利]智能设备的语音控制方法、系统和电子设备

说明书

本申请涉及智能设备的语音控制的领域，其具体地公开了一种智能设备的语音控制方法、系统和电子设备，其采用生理信号来进行辅助情绪识别，也就是，将所述语音信息进行分词和词嵌入处理，再结合所述情绪信息一起经由基于上下文的语义理解模型以得到各自的特征向量，进一步地再以所述情绪特征向量作为参考向量，应用解码器注意力机制，将所述语音特征向量的序列处理为基于所述情绪特征向量的上下文特征向量，以使得后续的分类控制指令更加准确。这样，能够对智能家用电器更好地进行智能控制，从而给人们带来更舒适的使用体验。

技术领域

本发明涉及智能设备的语音控制的领域，且更为具体地，涉及一种智能设备的语音控制方法、系统和电子设备。

背景技术

随着经济的快速发展和人们生活水平的不断提高，以家用电器为代表的电子设备越来越多的走进寻常百姓家，这些电子设备满足了人们的各项需求，并且丰富了人们的生活色彩，大大提升了人们的生活品质。

但是，这些电器的运行需要经常性的手动打开开关，给人们带来不便，且不符合智能家居的要求，目前的解决方法是给这些电器配置遥控器，但不同类型的电器需要配置不同的遥控器，且遥控器所控制的范围较小，对智能家居而言局限性较大，人们外出时便无法控制家中的电器运行。

现有一些厂家通过语音控制来解决智能家居的控制问题，也就是，识别用户所提出的语音指令，然后进行控制。但是仍然存在一些问题，其中一个问题是，现有的语音控制仅利用了语音的语义信息，而没有利用语音中所表达的模式信息，例如，情绪信息，比如，当用户想要增大智能音箱的音量时，其会表达增大音量，但智能音箱仅会基于默认的程序来提高音量而无法基于用户语音中的情绪来调节音量的增加量。

另一个问题是，由于人们的表达习惯不同、音色特征不同，以及还存在外界其他声音的干扰，这样就会使得提取语音控制指令中的情绪信息具有难度。因此，为了对家用电器实现更智能的控制，以给用户带来更好的体验感，期望一种智能设备的语音控制方案。

发明内容

为了解决上述技术问题，提出了本申请。本申请的实施例提供了一种智能设备的语音控制方法、系统和电子设备，其采用生理信号来进行辅助情绪识别，也就是，将所述语音信息进行分词和词嵌入处理，再结合所述情绪信息一起经由基于上下文的语义理解模型以得到各自的特征向量，进一步地再以所述情绪特征向量作为参考向量，应用解码器注意力机制，将所述语音特征向量的序列处理为基于所述情绪特征向量的上下文特征向量，以使得后续的分类控制指令更加准确。这样，能够对智能家用电器更好地进行智能控制，从而给人们带来更舒适的使用体验。

根据本申请的一个方面，提供了一种智能设备的语音控制方法，其包括：

获取用户用于控制智能设备的语音信息和所述用户在施加所述语音信息时的情绪信息；

对所述语音信息进行分词处理并将分词后的每个词通过词嵌入模型以获得输入向量的序列，且将所述情绪信息通过所述词嵌入模型以获得情绪向量；

将所述输入向量的序列和所述情绪向量分别通过基于转换器的编码器模型以获得语音特征向量的序列和情绪特征向量；

计算所述情绪特征向量与所述语音特征向量的序列中的每个语音特征向量之间的相似度以获得情绪上下文向量；

将所述语音特征向量的序列中的每个语音特征向量输入解码器模型以获得由每个所述语音特征向量对应的情绪标签分类概率值组成的情绪标签分类概率向量；

计算所述情绪上下文向量与所述情绪标签分类概率向量之间的基于所述编码器模型的转换器结构的掩码转换器值向量；

以所述掩码转换器值向量中各个位置的掩码转换器值作为加权系数，对所述语音特征向量的序列中的每一个语音特征向量进行加权以获得加权后语音特征向量的序列；

将所述加权后语音特征向量的序列中的每个加权后语音特征向量拼接为分类特征向量；