[发明专利]一种视频处理方法、装置、电子设备及存储介质

说明书

本申请实施例提供一种视频处理方法、装置、电子设备及存储介质，涉及图像处理技术领域。该方法包括接收图像采集装置发送的主播助理影像和主播影像；识别所述主播助理影像的实时表情，并生成相应表情的卡通头像；将所述主播助理影像替换成所述卡通头像；将所述卡通头像与所述主播影像进行视频合成并进行输出显示，通过卡通头像与主讲老师进行互动，增加课程趣味性，解决现有的线上教学难以吸引学生注意力，从而影响课堂效率的问题。

技术领域

本申请涉及图像处理技术领域，具体而言，涉及一种视频处理方法、装置、电子设备及存储介质。

背景技术

随着互联网的不断发展，在线教育的普及程度越来越高，线上课堂直播教学也越来越多，使得学生在家就能学习，具有较高的便利性，但相较于面对面的学校教学互动来说，线上教学更难吸引学生的注意力，从而影响课堂效率。

发明内容

本申请实施例的目的在于提供一种视频处理方法、装置、电子设备及存储介质，通过卡通头像与主讲老师进行互动，增加课程趣味性，解决现有的线上教学难以吸引学生注意力，从而影响课堂效率的问题。

本申请实施例提供了一种课堂直播卡通头像生成方法，所述方法包括：

获取主播助理的状态信息，所述状态信息包括主播助理的表情信息、语音信息以及姿态信息；

基于所述状态信息，生成主播助理的虚拟形象；

将所述虚拟形象合成到主播界面中。

在上述实现过程中，利用主播助理影像驱动成卡通头像且卡通形象会根据助教的表情变化而变化，并与主播影像进行同时显示，一个真人与一个卡通人的互动方式，增加趣味性，并保持亲和力，并且保留真人教师影像，使得画面整体自然，提高课堂效率，解决现有的线上教学难以吸引学生注意力，从而影响课堂效率的问题。

进一步地，所述基于所述状态信息，生成主播助理的虚拟形象，包括：

将所述主播助理的表情信息和姿态信息与预设的模型库中的多种三维模型进行匹配，以确定对应的虚拟形象模型；

基于所述虚拟形象模型，将所述语音信息进行卡通化，以生成卡通语音；

基于所述卡通语音对所述虚拟形象模型进行渲染并生成主播助理的三维卡通形象。

在上述实现过程中，可以将主播助理的表情信息和姿态信息与模型库中的三维模型进行比较，确定对应的虚拟形象模型，再对语音信息进行处理，将主播助理的形象利用三维卡通形象代替，增加趣味性。

进一步地，所述将所述主播助理的表情信息和姿态信息与预设的模型库中的多种三维模型进行匹配，以确定对应的虚拟形象模型，包括：

比较主播助理影像与所述三维模型在二维平面上的投影的相似度，以确定所述主播助理对应的虚拟形象模型。

在上述实现过程中，通过相似度计算快速、准确地确定主播助理的姿态和表情对应的虚拟形象模型。

进一步地，所述将所述虚拟形象合成到主播界面中，包括：

将所述三维卡通形象叠加到主播影像的视频流上进行视频AR合成，并在显像区进行显示。

在上述实现过程中，将三维卡通形象与主播影像进行叠加，使得在课程头像区显示为一个卡通形象和一个直播教师头像，两者进行互动，有助于增加课程的趣味性，吸引学生的注意力。

本申请实施例还提供一种课堂直播卡通头像生成装置，所熟知装置包括：

状态信息获取模块，用于获取主播助理的状态信息，所述状态信息包括主播助理的表情信息、语音信息以及姿态信息；

虚拟形成生成模块，用于基于所述状态信息，生成主播助理的虚拟形象；