[发明专利]基于虚拟2d数字人的多语种唇语数据生成方法、系统

摘要

本发明公开了一种基于虚拟2d数字人的多语种唇语数据生成方法，属于唇语标注数据制作领域。包括：获取包含字、词的分词列表，每一个字、词生成一个音频文件；使用音频文件驱动不同的虚拟2d数字人模板，获取虚拟2d数字人的脸部动作视频，根据音频文件对应的文本和虚拟2d数字人模板的编号对脸部动作视频命名；截取每一个脸部动作视频中各帧的嘴部区域，得到连续嘴部动作帧构成的嘴部视频；建立文本、截取嘴部区域的外接矩形、嘴部视频的映射关系，生成多语种唇语数据。本发明可得到同一个字、词对应的多种身份的口型，且每个字、词的口型出现比例均衡，无需人工审核。