[发明专利]人车互动方法、系统以及车辆和计算机可读存储介质

说明书

本发明公开了一种人车互动方法、系统以及车辆和计算机可读存储介质，其中，人车互动方法包括：通过设置在车内的麦克风接收用户的语音信息，并通过设置在车内的摄像头采集人脸图像；对语音信息进行识别，得到第一情绪信息，以及对人脸图像进行识别，得到第二情绪信息；根据第一情绪信息和第二情绪信息确定最终识别结果，得到第三情绪信息；根据第三情绪信息调整车载显示屏显示的虚拟人物的情绪。由此，该方法能够结合用户的语音信息和人脸图像识别用户的情绪信息，进而调整虚拟人物的情绪信息，更加拟人化，从而能够提高情绪识别的准确性，增加驾驶时的趣味性。

技术领域

本发明涉及车辆技术领域，尤其涉及一种人车互动方法、系统以及车辆和计算机可读存储介质。

背景技术

目前，车载虚拟人物虽然已经应用到全息投影技术，但其仍存在不够拟人化的问题，例如通过语义理解无法完美进行表情诠释、模拟，通过拍摄人脸不一定能虚拟出反应用户真实状态的人物等。

发明内容

本发明旨在至少在一定程度上解决相关技术中的技术问题之一。

为此，本发明的第一个目的在于提出一种人车互动方法，以结合用户的语音信息和人脸图像识别用户的情绪信息，进而调整虚拟人物的情绪信息，更加拟人化，从而能够提高情绪识别的准确性，增加驾驶时的趣味性。

本发明的第二个目的在于提出一种计算机可读存储介质。

本发明的第三个目的在于提出一种人车互动系统。

本发明的第四个目的在于提出一种车辆。

为达上述目的，本发明第一方面实施例提出了一种人车互动方法，包括：通过设置在车内的麦克风接收用户的语音信息，并通过设置在车内的摄像头采集人脸图像；对所述语音信息进行识别，得到第一情绪信息，以及对所述人脸图像进行识别，得到第二情绪信息；根据所述第一情绪信息和所述第二情绪信息确定最终识别结果，得到第三情绪信息；根据所述第三情绪信息调整车载显示屏显示的虚拟人物的情绪。

根据本发明实施例的人车互动方法，首先，通过车内的麦克风接收用户的语音信息，并通过车内的摄像头采集人脸图像；然后，对语音信息进行识别，进而得到第一情绪信息，以及对人脸图像进行识别，进而得到第二情绪信息；再然后，根据第一情绪信息和第二情绪信息确定最终识别结果，以得到第三情绪信息；最后，根据第三情绪信息调整车载显示屏显示的虚拟人的情绪。由此，该方法能够结合用户的语音信息和人脸图像识别用户的情绪信息，进而调整虚拟人物的情绪信息，更加拟人化，从而能够提高情绪识别的准确性，增加驾驶时的趣味性。

另外，根据本发明上述实施例的人车互动方法还可以具有如下附加的技术特征：

根据本发明的一个实施例，所述对所述语音信息进行识别，包括：通过设置在车辆上的本地语音识别模块对所述语音信息进行识别；如果所述本地语音识别模块不能从所述语音信息中提取到情绪特征，则将所述语音信息发送至云端，以通过云端语音识别模块对所述语音信息进行识别。

根据本发明的一个实施例，所述对所述语音信息进行识别，还包括：将所述语音信息转换为文字信息；对所述文字信息进行分词和语义解析，并判断从所述文字信息中是否能够提取到情绪特征；如果从所述文字信息中能够提取到情绪特征，则将所述情绪特征作为所述第一情绪信息；如果从所述文字信息中不能够提取到情绪特征，则判定所述语音信息无语义，并将无语义特征作为所述第一情绪信息。

根据本发明的一个实施例，所述第二情绪信息为表征情绪程度的信息或无法判断信息。