[发明专利]一种多媒体信息处理方法、装置、电子设备及存储介质

说明书

本发明公开了一种多媒体信息处理方法、装置、电子设备及存储介质，该方法包括：获取多媒体信息；对所述多媒体信息进行处理，得到处理结果；将所述多媒体信息和所述处理结果发送至车辆的座舱域控制器，由所述座舱域控制器根据所述多媒体信息和所述处理结果，确定并展示控制结果。本发明采用智能协处理器和座舱域控制器的分体式设计，以较低的芯片成本提高了多媒体信息处理的效率，从而满足如今逐渐丰富的人机交互应用场景。

技术领域

本发明涉及智能驾驶技术领域，特别涉及一种多媒体信息处理方法、装置、电子设备及存储介质。

背景技术

车载智能座舱系统作为人车交互的入口，为用户提供智能和安全的驾乘体验。随着视觉AI技术的发展，智能座舱域控制器基于外接摄像头的功能越来越多：驾驶员监控、成员监控、感知360、手势识别等。这些功能的日益丰富，意味着对座舱域控制器处理能力的要求越来越高，目前一体式座舱域控制器的发展已经跟不上功能需求的快速增加。

发明内容

为了解决现有技术的问题，本发明实施例提供了一种多媒体信息处理方法、装置、电子设备及存储介质。所述技术方案如下：

一方面，提供了一种多媒体信息处理方法，应用于车辆的智能协处理器，所述方法包括：

获取车载多媒体采集模块采集的多媒体信息；

对多媒体信息进行处理，得到处理结果；

将多媒体信息和处理结果发送至车辆的座舱域控制器，由座舱域控制器根据多媒体信息和处理结果，确定并展示控制结果。

另一方面，提供了一种多媒体信息处理装置，应用于车辆的智能协处理器，所述装置包括：

获取模块，用于获取车载多媒体采集模块采集的多媒体信息；

处理模块，用于对多媒体信息进行处理，得到处理结果；

发送模块，用于将多媒体信息和处理结果发送至车辆的座舱域控制器，由座舱域控制器根据多媒体信息和处理结果，确定并展示控制结果。

在一个示例性的实施方式中，所述处理模块具体用于：

将多媒体信息输入到意图识别模型进行意图识别处理，得到意图识别结果。

在一个示例性的实施方式中，多媒体信息包括视频信息和/或音频信息,所述获取模块包括：

视频接收模块，用于接收由外设摄像头模块采集的视频信息；

音频接收模块，用于接收由外设麦克风模块采集的音频信息；其中，外设摄像头模块和外设麦克风模块分别与车载多媒体采集模块连接。

在一个示例性的实施方式中，所述发送模块具体用于：

通过预设视频通道，将视频信息发送至座舱域控制器内的视频接收模块；

通过第一传输接口，将音频信息和处理结果发送至座舱域控制器。

另一方面，提供了另一种多媒体信息处理方法，应用于车辆的座舱域控制器，所述方法包括：

接收车辆的智能协处理器所发送的多媒体信息和处理结果；

根据多媒体信息和处理结果，确定并展示控制结果；其中，处理结果是智能协处理器获取车载多媒体采集模块采集的多媒体信息，对多媒体信息进行处理得到的。

另一方面，提供了另一种多媒体信息处理装置，应用于车辆的座舱域控制器，所述装置包括：

接收模块，用于接收车辆的智能协处理器所发送的多媒体信息和处理结果；