[发明专利]交互方法、装置、设备及存储介质

说明书

本公开涉及一种交互方法、装置、设备及存储介质。由于原视频信息可以是终端采集到的真实人物的视频信息，原音频信息是终端采集到的真实人物的音频信息。终端将真实人物的视频信息和音频信息分别编码后发送给云端服务器，云端服务器可以根据真实人物的音频信息生成包括第一虚拟人物的目标视频信息，根据真实人物的视频信息生成由第一虚拟人物或其他虚拟人物播报的目标音频信息。当云端服务器将第一虚拟人物的目标视频信息和由第一虚拟人物或其他虚拟人物播报的目标音频信息分别编码后发送给终端时，从而实现了真实人物的视频信息和第一虚拟人物的目标视频信息之间的实时视讯。使得听觉或语言有障碍的用户与正常人进行视频通讯时可以进行有效沟通。

技术领域

本公开涉及信息技术领域，尤其涉及一种交互方法、装置、设备及存储介质。

背景技术

随着科技的不断发展，终端可以采集获得真实人物的视频信息，并将该真实人物的视频信息推送给云端，云端可以生成虚拟人物的视频信息。但是，真实人物的视频信息和虚拟人物的视频信息无法进行实时视讯。另外，目前真实人物之间的视频通讯越来越普遍和便利，但是，对于听觉有障碍或语言有障碍的用户来说，与正常人进行视频通讯时，就会变得无法有效沟通。

发明内容

为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种交互方法、装置、设备及存储介质，以实现真实人物的视频信息和第一虚拟人物的目标视频信息之间的实时视讯。

第一方面，本公开实施例提供一种交互方法，包括：

获取原音频流数据和原视频流数据；

对所述原音频流数据进行解码得到原音频信息，对所述原视频流数据进行解码得到原视频信息，所述原视频信息包括真实人物；

对所述原音频信息进行语音识别，并根据语音识别结果生成目标视频信息，所述目标视频信息包括第一虚拟人物；

对所述原视频信息进行动作识别，并根据动作识别结果生成目标音频信息；

对所述目标视频信息进行编码得到目标视频流数据，对所述目标音频信息进行编码得到目标音频流数据；

推送所述目标视频流数据和所述目标音频流数据。

第二方面，本公开实施例提供一种交互装置，包括：

获取模块，用于获取原音频流数据和原视频流数据；

解码模块，用于对所述原音频流数据进行解码得到原音频信息，对所述原视频流数据进行解码得到原视频信息，所述原视频信息包括真实人物；

生成模块，用于对所述原音频信息进行语音识别，并根据语音识别结果生成目标视频信息，所述目标视频信息包括第一虚拟人物；对所述原视频信息进行动作识别，并根据动作识别结果生成目标音频信息；

编码模块，用于对所述目标视频信息进行编码得到目标视频流数据，对所述目标音频信息进行编码得到目标音频流数据；

推送模块，用于推送所述目标视频流数据和所述目标音频流数据。

第三方面，本公开实施例提供一种电子设备，包括：

存储器；

处理器；以及

计算机程序；

其中，所述计算机程序存储在所述存储器中，并被配置为由所述处理器执行以实现如第一方面所述的方法。

第四方面，本公开实施例提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行以实现第一方面所述的方法。