[发明专利]场景渲染方法及装置、存储介质及电子设备

说明书

本发明提供一种场景渲染方法及装置、存储介质及电子设备，该方法包括：接收用户通过客户端发送的渲染指令，获取与渲染指令对应的问题文本和应答文本；对问题文本和应答文本进行语义场景分析，确定与渲染指令对应的语义场景；获取与语义场景对应的场景图片序列，并基于场景图片序列生成场景渲染数据流，将场景渲染数据流发送至客户端，使得客户端应用场景渲染数据流渲染应答数据。通过对问题文本和应答文本进行分析，确定语义场景，并基于与语义场景对应的场景图片序列生成场景渲染数据流，使得客户端基于场景渲染数据流渲染应答场景，该过程无需为每个场景训练神经网络，可以减少时间和成本的投入，降低渲染场景的成本。

技术领域

本发明涉及人机交互技术领域，特别涉及一种场景渲染方法及装置、存储介质及电子设备。

背景技术

随着计算机技术的发展，数字人可应用的场景越来越多，在使用数字人为客户提供服务的时候，通过渲染出客户与数字人在交互过程中涉及的场景，可为客户提供沉浸式体验，由此为客户提供更加优质的应用体验和服务。

现阶段的2D形态的数字人是使用神经网络渲染的，为了给客户渲染场景，达到沉浸式的效果，神经网络需要针对每种场景进行训练，才能渲染对应的场景，而场景的数量和种类众多，对神经网络进行训练花费需要花费大量的时间和成本，导致使用目前的方式渲染场景需要投入大量的成本。

发明内容

有鉴于此，本发明提供一种场景渲染方法及装置、存储介质及电子设备，本发明无需为每个场景训练对应的神经网络，使用基于场景图片序列生成的场景渲染数据流渲染场景，由此减少了渲染场景时投入的成本和时间，降低渲染场景所需的成本。

为实现上述目的，本发明实施例提供如下技术方案：

本发明第一方面公开一种场景渲染方法，包括：

接收用户通过客户端发送的渲染指令，获取与所述渲染指令对应的问题文本和应答文本；

对所述问题文本和所述应答文本进行语义场景分析，确定与所述渲染指令对应的语义场景；

获取与所述语义场景对应的场景图片序列，并基于所述场景图片序列生成场景渲染数据流；

将所述场景渲染数据流发送至所述客户端，使得所述客户端应用所述场景渲染数据流渲染应答场景。

上述的方法，可选的，所述获取与所述渲染指令对应的问题文本和应答文本，包括：

对所述渲染指令进行解析，获取所述渲染指令中的问题数据，并基于所述问题数据确定问题文本；

对所述问题文本进行处理，得到与所述问题文本对应的应答音频数据和应答文本。

上述的方法，可选的，所述基于所述问题数据确定问题文本，包括：

确定所述问题数据的数据格式；

依据所述数据格式对所述问题数据进行处理，获得问题文本。

上述的方法，可选的，所述对所述问题文本和所述应答文本进行语义场景分析，确定与所述渲染指令对应的语义场景，包括：

从所述问题文本和所述应答文本中提取语义场景关键字，并基于所述语义场景关键字确定是否存在场景个性化需求；

若确定存在场景个性化需求，则确定与所述语义场景关键字对应的个性化场景，并将所述个性化场景确定为与所述渲染指令对应的语义场景；

若确定不存在场景个性化需求，则将预设的默认场景作为与所述渲染指令对应的语义场景。

上述的方法，可选的，所述基于所述场景图片序列生成场景渲染数据流，包括：

基于所述应答文本确定数字人渲染图片序列；