[发明专利]多终端多语言实时视频群内私聊的方法及系统

说明书

本发明公开了一种实现多终端多语言实时视频群内私聊的方法及系统，移动终端在聊天群组里的移动终端中选定至少一个私聊的第二移动终端并采集视频流、音频流和时间戳进行压缩分别发送至流媒体服务器和识别服务器，业务服务器向数据库服务器请求查询其他移动终端的预留信息以判断是否需要进行语言翻译并建立直接通信路径，当需要进行翻译时识别服务器将第一音频流转码为第一语言文本并由翻译服务器进行翻译为第二语言文本，并由合成服务器转换为第二音频流并发送至流媒体服务器，混流服务器像流媒体服务器调取视频流及第二音频流混流成第二视频文件，并发送至其他移动终端，使不同的移动终端之间能实现无语言障碍的多终端多语言实时视频群内私聊。

技术领域

本发明涉及实时群聊翻译技术领域，尤其涉及一种多终端多语言实时视频群内私聊的方法及系统。

背景技术

日常生活或商务活动中，随着互联网技术的普及，不同国家(地区)的终端能够通过移动终端同时进行视频聊天对话或视频会议，但不同国家(地区)的人使用的语言也不同，当需要已未掌握的语言进行实时视频交流就会存在着语言的沟通障碍，现在虽然有各种各样的翻译工具，但都是对文本进行翻译或者只是单纯的语音实时翻译，虽然有视频翻译工具，但是都是对录制视频的翻译，暂时还没有可以实现多终端多语言实时视频群内私聊的工具或系统。

发明内容

本发明要解决的技术问题在于，针对现有技术的上述缺陷，提供一种多终端多语言实时视频群内私聊的方法和系统。

本发明解决其技术问题所采用的技术方案是：根据本发明的一方面，提供一种多终端多语言实时视频群内私聊的方法，包括以下步骤：

S10：第一移动终端在群组里选定私聊的至少一个第二移动终端；

S20：第一移动终端同时采集视频流、第一音频流及其对应的时间戳，将视频流及时间戳发送至流媒体服务器，以及将第一音频流发送至识别服务器；

S30：业务服务器向数据库服务器请求查询选定的至少一个第二移动终端的身份信息、第二语言信息以及相互间的链接信息，建立直接通信路径，并判断第一语言信息和第二语言信息是否相同，若不相同，则执行步骤S40，若相同，则执行步骤S70；

S40：识别服务器将第一音频流识别为第一语言文本，并发送至翻译服务器；

S50：翻译服务器将第一语言文本翻译为至少一种第二语言文本，并发送至合成服务器；

S60：合成服务器将至少一种第二语言文本合成为至少一种第二音频流，并发送至流媒体服务器；

S70：混流服务器从流媒体服务器调取视频流及至少一种第二音频流，并根据时间戳将视频流及至少一种第二音频流混流成至少一种第二视频文件，并通过直接通信路径对应分别发送至至少一个第二移动终端；

S80：至少一个第二移动终端解码至少一种第二视频文件并播放。

优选的，还包括步骤：

S01：将第一移动终端与至少两个第二移动终端建立群组，并将群组中的第一移动终端与至少一个第二移动终端的身份信息、语言信息以及相互间的链接信息发送至数据库服务器；

选定私聊的第二移动终端个数少于群组内的全部移动终端的个数。

优选的，所述S20：第一移动终端采集视频流、第一音频流及其对应的时间戳，还可以为：

S21：第一移动终端采集获取第一视频文件；

S22：第一移动终端将第一视频文件分解为视频流、第一音频流及其对应的时间戳。

优选的，所述S50，还包括步骤：

S51：翻译服务器将第一语言文本及至少一种第二语言文本，并发送至流媒体服务器；