[发明专利]一种基于三维动画直播的实时提词器方法和装置

说明书

本发明涉及一种基于三维动画直播的实时提词方法，包括以下步骤：基于三维动画的直播场景及其对应的视角，确定三维动画实时提词器的位置；为三维动画中的三维角色模型绑定骨骼模型，为预设的肢体动作准备动画，并导入至图形引擎；在动捕室内通过设置与三维动画实时提词器相错位的动作捕捉器，并基于动作捕捉器的位置补偿实时采集动捕演员的动作数据，以匹配对应的骨骼模型；在将三维动画实时提词器连接至直播导播工作站后，开始进行直播。本发明还涉及到一种基于三维动画直播的实时提词器系统。本发明的有益效果为：通过三维动画虚拟技术，将字幕文件投射到主播的面前，使主播观看到提词的同时又能在镜头面前表现自然。

技术领域

本发明涉及三维动画虚拟偶像直播的领域，尤其涉及到基于三维动画虚拟偶像直播的实时提词方法和系统。

背景技术

随着电子娱乐产业的发展，直播行业也迅速崛起，受众群体越来越大，包括各个年龄层的人。因此，对于新生代群体或动漫爱好者等追求新潮的人群，传统的直播节目已经无法满足这类人群的需求了，因此，开始出现虚拟偶像直播，在直播中，主播是一个虚拟形象，可能是可爱的动物，负责搞笑卖萌，也可能是用户所喜爱的动漫形象。

在这种虚拟偶像直播中，主要采用混合现实仿真融合和交互控制技术，是一种可以实现真人面部控制的实时混合现实内容生产技术，不仅如此，它还能输出为视频或VR/AR设备兼容的其它数据形式。就是这项技术，让动漫形象的平面人物，升维到3D形象，背后的声优只要通过自己面部表情的改变，就能控制动漫形象的一切语言行为，最终让他变成一个“真人”，拥有说话、卖萌、耍宝、大笑以及眨眼的能力了。

在直播过程中，直播的效果完全取决于控制虚拟形象的主播，主播能否生动自然的表现决定了直播是否精彩和受人喜欢。在直播节目中通常需要用到提词器以帮助主播顺利进行节目表演，在虚拟直播中，主播往往容易因为注视提词器而显得眼神飘忽，使节目效果大打折扣，因此需要一种提词器可以让主播观看到提词的同时又能在镜头面前表现自然。

发明内容

本申请提供一种基于三维动画虚拟偶像直播的实时提词方法和系统，通过三维动画虚拟技术，将字幕文件投射到主播的面前，使主播观看到提词的同时又能在镜头面前表现自然。

为实现上述效果，本申请公开了以下方案。

首先，本申请提供公开了一种基于三维动画直播的实时提词方法，包括以下步骤：基于三维动画的直播场景及其对应的视角，确定三维动画实时提词器的位置；为三维动画中的三维角色模型绑定骨骼模型，为预设的肢体动作准备动画，并导入至图形引擎；在动捕室内通过设置与三维动画实时提词器相错位的动作捕捉器，并基于动作捕捉器的位置补偿实时采集动捕演员的动作数据，以匹配对应的骨骼模型；在将三维动画实时提词器连接至直播导播工作站后，开始进行直播。

进一步地，在本申请的上述方法中，上述三维动画实时提词器可以至少还包括视角提示标识物。

进一步地，在本申请的上述方法中，上述三维动画实时提词器至少还包括用于实时检测与动捕演员距离的距离传感器。

进一步地，在本申请的上述方法中，在将三维动画实时提词器连接至直播导播工作站后，开始进行直播的步骤中，还可包括以下的子步骤：将三维动画实时提词器的辅助设备安装在三维动画实时提词器主干支架上；基于当前的三维动画场景，调整三维动画实时提词器的位置。其中，所述辅助设备至少包括遮光罩、分光镜、显示屏、虚拟摄像机、电源和视频线。

进一步地，在本申请的上述方法中，在动捕室内通过设置与三维动画实时提词器相错位的动作捕捉器，并基于动作捕捉器的位置补偿实时采集动捕演员的动作数据的步骤中，还可包括以下子步骤：动捕演员在进入动捕房间、穿戴标记点动捕服和佩戴头盔式面部表情捕捉系统后，执行预设的动捕校验动作；基于动作捕捉器所接收到的动作数据，计算对应动作捕捉器的动作补偿值。