[发明专利]虚拟演播厅全流程多终端板书提取方法和装置在审
申请号: | 202110252053.2 | 申请日: | 2021-03-08 |
公开(公告)号: | CN113010129A | 公开(公告)日: | 2021-06-22 |
发明(设计)人: | 李宏伟;李艳飞;李广胜;张丰;王研;周献阳;张晓峰;李媛媛;周浩;赵寅 | 申请(专利权)人: | 辽宁向日葵教育科技有限公司 |
主分类号: | G06F3/14 | 分类号: | G06F3/14;G06F9/451;G06F40/186;G06T11/60;G06T7/10;G06T3/40;G06T5/50 |
代理公司: | 北京久维律师事务所 11582 | 代理人: | 邢江峰 |
地址: | 110000 辽宁省沈阳*** | 国省代码: | 辽宁;21 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟 演播厅 流程 终端 板书 提取 方法 装置 | ||
1.一种虚拟演播厅全流程多终端板书提取方法,其特征在于,所述方法包括:
基于预设的数据过滤机制对板书文本数据进行过滤,并利用数据传输协议将过滤的所述板书文本数据传输至虚拟演播厅;
对所述虚拟演播厅中的板书文本数据构建文本画面,并创建所述文本画面的响应事件按钮;
利用预训练好的人像抠图模型对板书图像进行人像抠图,生成人像图像;
根据所述文本画面、响应事件按钮以及人像图像,生成所述虚拟演播厅的板书界面。
2.如权利要求1所述的虚拟演播厅全流程多终端板书提取方法,其特征在于,所述利用数据传输协议将过滤的所述板书文本数据传输至虚拟演播厅,包括:
获取过滤的所述板书文本数据的程序运行文件包,并识别所述程序运行文件包的接口参数;
获取所述虚拟演播厅的端口参数;
根据所述接口参数以及端口参数,利用所述数据传输协议配置所述程序运行文件包和所述虚拟演播厅的数据传输通道;
基于所述数据传输通道,将过滤的所述板书文本数据传输至所述虚拟演播厅。
3.如权利要求1所述的虚拟演播厅全流程多终端板书提取方法,其特征在于,所述创建所述文本画面的响应事件按钮包括:
获取所述文本画面的编译环境;
在所述编译环境中,创建所述文本画面的响应按钮脚本;
基于所述响应事件脚本加载对应文本画面的事件触发按钮,生成响应事件按钮。
4.如权利要求1所述的虚拟演播厅全流程多终端板书提取方法,其特征在于,所述利用预训练好的人像抠图模型对板书图像进行人像抠图,生成人像图像,包括:
利用所述人像抠图模型中的人像分割模块对所述板书图像进行人像分割处理,得到人像分割图;
利用所述人像抠图模型中的人像回归模块对所述人像采样图进行抠图处理,得到人像图像。
5.如权利要求4中所述的虚拟演播厅全流程多终端板书提取方法,其特征在于,所述利用所述人像抠图模型中的人像分割模块对所述板书图像进行人像分割处理,得到人像分割图,包括:
利用所述人像分割模块对所述板书图像进行特征提取,得到特征图;
对所述特征图进行卷积操作并输出,得到所述人像分割图。
6.如权利要求4所述的虚拟演播厅全流程多终端板书提取方法,其特征在于,所述利用所述人像抠图模型中的人像回归模块对所述人像采样图进行抠图处理,得到人像图像,包括:
利用所述人像回归模块对所述人像分割图进行上采样,得到人像采样图;
将所述人像采样图和所述板书图像进行拼接,得到所述特征采样图和所述原始图像的拼接图像;
对所述拼接图像进行融合操作,得到所述拼接图像的融合图像;
利用所述人像回归模块中的激活函数输出所述融合图像,得到人像图像。
7.如权利要求1至6中任一项所述的虚拟演播厅全流程多终端板书提取方法,其特征在于,所述根据所述文本画面、响应事件按钮以及人像图像,生成所述虚拟演播厅的板书界面,包括:
在所述虚拟演播厅中构建界面显示层,所述板书界面显示层包括板卡层、操作画面层以及人像层;
将所述文本画面、响应事件按钮以及人像图像分别加载至所述板卡层、操作画面层以及人像层中,生成板卡画面、响应画面以及人像画面;
将所述板卡画面、响应画面以及人像画面进行融合,生成所述虚拟演播厅的板书界面。
8.一种虚拟演播厅全流程多终端板书提取装置,其特征在于,所述装置包括:
传输模块,用于基于预设的数据过滤机制对板书文本数据进行过滤,并利用数据传输协议将过滤的所述板书文本数据传输至虚拟演播厅;
创建模块,用于对所述虚拟演播厅中的板书文本数据构建文本画面,并创建所述文本画面的响应事件按钮;
抠图模块,用于利用预训练好的人像抠图模型对板书图像进行人像抠图,生成人像图像;
生成模块,用于根据所述文本画面、响应事件按钮以及人像图像,生成所述虚拟演播厅的板书界面。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于辽宁向日葵教育科技有限公司,未经辽宁向日葵教育科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110252053.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种锂氟化碳电池
- 下一篇:E1E2 HCV疫苗及使用方法