[发明专利]人车互动方法、系统以及车辆和计算机可读存储介质

权利要求书

1.一种人车互动方法，其特征在于，包括：

通过设置在车内的麦克风接收用户的语音信息，并通过设置在车内的摄像头采集人脸图像；

对所述语音信息进行识别，得到第一情绪信息，以及对所述人脸图像进行识别，得到第二情绪信息；

根据所述第一情绪信息和所述第二情绪信息确定最终识别结果，得到第三情绪信息；

根据所述第三情绪信息调整车载显示屏显示的虚拟人物的情绪。

2.如权利要求1所述的人车互动方法，其特征在于，所述对所述语音信息进行识别，包括：

通过设置在车辆上的本地语音识别模块对所述语音信息进行识别；

如果所述本地语音识别模块不能从所述语音信息中提取到情绪特征，则将所述语音信息发送至云端，以通过云端语音识别模块对所述语音信息进行识别。

3.如权利要求1或2所述的人车互动方法，其特征在于，所述对所述语音信息进行识别，还包括：

将所述语音信息转换为文字信息；

对所述文字信息进行分词和语义解析，并判断从所述文字信息中是否能够提取到情绪特征；

如果从所述文字信息中能够提取到情绪特征，则将所述情绪特征作为所述第一情绪信息；

如果从所述文字信息中不能够提取到情绪特征，则判定所述语音信息无语义，并将无语义特征作为所述第一情绪信息。

4.如权利要求3所述的人车互动方法，其特征在于，所述第二情绪信息为表征情绪程度的信息或无法判断信息。

5.如权利要求4所述的人车互动方法，其特征在于，所述根据所述第一情绪信息和所述第二情绪信息确定最终识别结果，得到第三情绪信息，包括：

判断所述第一情绪信息与所述第二情绪信息是否存在冲突；

如果所述第一情绪信息与所述第二情绪信息不存在冲突，则将所述第二情绪信息作为所述第三情绪信息；

如果所述第一情绪信息与所述第二情绪信息存在冲突，且所述第一情绪信息不为所述无语义特征，所述第二情绪信息不为所述无法判断信息，则将所述第一情绪信息与所述第二情绪信息中的情绪程度进行组合，得到所述第三情绪信息；

如果所述第一情绪信息与所述第二情绪信息存在冲突，且所述第一情绪信息为所述无语义特征，则将不改变情绪信息作为所述第三情绪信息；

如果所述第一情绪信息与所述第二情绪信息存在冲突，且所述第一情绪信息不为所述无语义特征，所述第二情绪信息为所述无法判断信息，则获取所述第一情绪信息包含的情绪可能程度，将所述第一情绪信息和所述情绪可能程度进行组合，得到所述第三情绪信息。

6.如权利要求5所述的人车互动方法，其特征在于，当所述第三情绪信息包括多种情绪时，所述根据所述第三情绪信息调整车载显示屏显示的虚拟人物的情绪，包括：

控制所述车载显示屏显示的虚拟人物情绪在所述多种情绪之间进行轮流切换。

7.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现如权利要求1-6中任一项所述的人车互动方法。

8.一种人车互动系统，其特征在于，包括：

麦克风，所述麦克风设置在车内，用于接收用户的语音信息；

摄像头，所述摄像头设置在车内，用于采集人脸图像；

车载显示屏，用于显示虚拟人物；

第一识别模块，用于对所述语音信息进行识别，得到第一情绪信息；

第二识别模块，用于对所述人脸图像进行识别，得到第二情绪信息；

确定模块，用于根据所述第一情绪信息和所述第二情绪信息确定最终识别结果，得到第三情绪信息；

调整模块，用于根据所述第三情绪信息调整所述车载显示屏显示的虚拟人物的情绪。