[发明专利]场景渲染方法及装置、存储介质及电子设备在审
申请号: | 202111212378.4 | 申请日: | 2021-10-18 |
公开(公告)号: | CN113850898A | 公开(公告)日: | 2021-12-28 |
发明(设计)人: | 常向月;王雨辰;穆少垒 | 申请(专利权)人: | 深圳追一科技有限公司 |
主分类号: | G06T15/00 | 分类号: | G06T15/00;G06F16/332;G06F16/33;G06F40/30 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 李慧慧 |
地址: | 518000 广东省深圳市南山区粤海街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 场景 渲染 方法 装置 存储 介质 电子设备 | ||
1.一种场景渲染方法,其特征在于,包括:
接收用户通过客户端发送的渲染指令,获取与所述渲染指令对应的问题文本和应答文本;
对所述问题文本和所述应答文本进行语义场景分析,确定与所述渲染指令对应的语义场景;
获取与所述语义场景对应的场景图片序列,并基于所述场景图片序列生成场景渲染数据流;
将所述场景渲染数据流发送至所述客户端,使得所述客户端应用所述场景渲染数据流渲染应答场景。
2.根据权利1所述的方法,其特征在于,所述获取与所述渲染指令对应的问题文本和应答文本,包括:
对所述渲染指令进行解析,获取所述渲染指令中的问题数据,并基于所述问题数据确定问题文本;
对所述问题文本进行处理,得到与所述问题文本对应的应答音频数据和应答文本。
3.根据权利要求2所述的方法,其特征在于,所述基于所述问题数据确定问题文本,包括:
确定所述问题数据的数据格式;
依据所述数据格式对所述问题数据进行处理,获得问题文本。
4.根据权利要求1所述的方法,其特征在于,所述对所述问题文本和所述应答文本进行语义场景分析,确定与所述渲染指令对应的语义场景,包括:
从所述问题文本和所述应答文本中提取语义场景关键字,并基于所述语义场景关键字确定是否存在场景个性化需求;
若确定存在场景个性化需求,则确定与所述语义场景关键字对应的个性化场景,并将所述个性化场景确定为与所述渲染指令对应的语义场景;
若确定不存在场景个性化需求,则将预设的默认场景作为与所述渲染指令对应的语义场景。
5.根据权利要求2所述的方法,其特征在于,所述基于所述场景图片序列生成场景渲染数据流,包括:
基于所述应答文本确定数字人渲染图片序列;
应用预设的静默视频生成服务器,对所述场景图片序列、所述应答音频数据和所述数字人渲染图片序列进行数据合成处理,得到场景渲染数据流。
6.根据权利要求4所述的方法,其特征在于,所述获取与所述语义场景对应的场景图片序列,包括:
在将所述个性化场景确定为与所述渲染指令对应的语义场景时,确定场景背景图片存储服务器中是否存在与所述个性化场景对应的个性化图片序列;
若确定场景背景图片存储服务器中存在与所述个性化场景对应的个性化图片序列,则将与所述个性化场景对应的预设的个性化图片序列作为与所述语义场景对应的场景图片序列;
若确定场景背景图片存储服务器中不存在与所述个性化场景对应的预设图片序列,则将预设的默认图片序列作为与所述语义场景对应的场景图片序列;
在将预设的默认场景作为与所述渲染指令对应的语义场景时,将所述默认图片序列作为与所述语义场景对应的场景图片序列。
7.根据权利要求1所述的方法,其特征在于,所述将所述场景渲染数据流发送至所述客户端,包括:
应用预设的流媒体服务器将所述场景渲染数据流发送至所述客户端。
8.一种场景渲染装置,其特征在于,包括:
获取单元,用于接收用户通过客户端发送的渲染指令,获取与所述渲染指令对应的问题文本和应答文本;
语义场景分析单元,用于对所述问题文本和所述应答文本进行语义场景分析,确定与所述渲染指令对应的语义场景;
生成单元,用于获取与所述语义场景对应的场景图片序列,并基于所述场景图片序列,生成场景渲染数据流;
渲染单元,用于将所述场景渲染数据流发送至所述客户端,使得所述客户端应用所述场景渲染数据流渲染应答场景。
9.一种存储介质,其特征在于,所述存储介质包括存储的指令,其中,在所述指令运行时控制所述存储介质所在的设备执行如权利要求1~7任意一项所述的场景渲染方法。
10.一种电子设备,其特征在于,包括存储器,以及一个或者一个以上的指令,其中一个或者一个以上指令存储于存储器中,且经配置以由一个或者一个以上处理器执行如权利要求1~7任意一项所述的场景渲染方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳追一科技有限公司,未经深圳追一科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111212378.4/1.html,转载请声明来源钻瓜专利网。