[发明专利]一种实时生成演唱视频的方法和系统

说明书

本发明涉及多媒体技术领域，特别涉及一种实时生成演唱视频的方法和系统。一种实时生成演唱视频的方法，包括步骤：获取演唱视频；生成基础素材；获取渲染模板；根据所述渲染模板将所述基础素材实时渲染至所述演唱视频。用户可通过多种渠道实时自定义基础素材，基础素材资源丰富，且可对基础素材进行预编辑，使得显示效果更加丰富的同时用户体验性更好；渲染模板的制作采用3D建模和3D引擎技术，渲染模板包含多种特效组合，使得显示效果更加生动酷炫、视觉效果更加好；渲染后的视频播放过程中，可以多个用户同时进行追加素材，对于追加素材将优先被播放，可实现多用户间的实时互动，大大提高互动性和趣味性。

技术领域

本发明涉及多媒体技术领域，特别涉及一种实时生成演唱视频的方法和系统。

背景技术

随着屏幕技术的发展，人们对屏幕内容(无论是图片或视频)的展示效果要求越来越高，现有的2D展示效果不够丰富，例如KTV点歌系统的电视界面等，不仅显示单调，而且互动性不够，让人容易产生视觉疲劳，无法满足人们的要求。特别是现在随着网络的发展，人们越来越喜欢重复观看一些经典旧视频，而这些经典旧视频由于当年拍摄硬件的限制，显示分辨率很低，而由于各种原因其显示分辨率无法提高，或者分辨率提高成本比较高，如重新拍摄。因此这些经典旧视频在现在高分辨率的大尺寸电视上显示效果非常差。并且目前的演唱形式只有歌曲的MV视频播放，视频MV画面效果比较固定和单一，缺乏互动性和趣味性。

为解决上述的技术问题，常用的技术手段是通过将这些旧视频叠在高分辨率背景视频上，经典旧视频按较低尺寸显示，可以改善显示效果。而这样的解决办法仅仅只能改善显示清晰度，在视频的显示效果上仍然是显示单调，缺乏互动性和趣味性。

发明内容

为此，需要提供一种实时生成演唱视频的方法，用以解决现有技术中视频只能改善显示清晰度，但显示效果单调、缺乏互动性和趣味性的问题。具体的技术方案如下：

一种实时生成演唱视频的方法，包括步骤：播放歌曲的视频画面和/或音频，实时获取基础素材；选择预置的渲染模板；根据所述渲染模板将所述基础素材实时渲染至所述歌曲视频画面；实时获取追加素材；根据所述渲染模板优先将所述追加素材实时渲染至所述歌曲视频画面，并进行实时显示。

进一步的，所述步骤“实时获取追加素材；根据所述渲染模板优先将所述追加素材实时渲染至所述歌曲视频画面，并进行实时显示”具体为：实时获取追加素材；发送所述追加素材至数字终端可访问的位置；数字终端根据所述渲染模板优先将所述追加素材实时渲染至所述歌曲视频画面，并进行实时显示；或实时获取追加素材并发送至云端；云端根据所述渲染模板优先将所述追加素材实时渲染至所述歌曲视频画面，得到渲染后的歌曲视频画面；将所述渲染后的歌曲视频画面发送到数字终端可访问的位置；数字终端获取所述渲染后的歌曲视频画面后进行实时显示。

进一步的，所述根据所述渲染模板优先将所述追加素材实时渲染至所述歌曲视频画面，并进行实时显示中，所述实时渲染操作具体为：将追加素材读取到显存中作为GPU处理的输入；GPU执行预制着色语言程序(shader)对显存中的追加素材实时处理输出到framebuffer中待显示；其中所述预制着色语言程序效果包括滤镜、抠图、人脸识别或叠加。

进一步的，所述“选择预置的渲染模板；根据所述渲染模板将所述基础素材实时渲染至所述歌曲视频画面”，还包括步骤：在云端预置渲染模板；发送所述演唱视频和所述基础素材至云端；云端根据所述渲染模板将所述基础素材实时渲染至所述歌曲视频画面，得到渲染后的歌曲视频画面；将渲染后的歌曲视频画面发送至数字终端可访问的位置；或在云端预置渲染模板；发送所述基础素材至云端；云端根据所述渲染模板对基础素材进行预渲染，形成初步渲染素材；发送所述初步渲染素材至数字终端可访问的位置；数字终端将所述初步渲染素材实时渲染至所述歌曲视频画面，得到渲染后的歌曲视频画面；或在数字终端预置渲染模板；发送所述基础素材、歌曲视频画面至数字终端可访问的位置；数字终端根据所述渲染模板将所述基础素材实时渲染至所述歌曲视频画面，得到渲染后的歌曲视频画面。