[发明专利]实时交互流媒体系统

说明书

本公开的实施例公开了一种实时交互流媒体系统。该系统的具体实施方式包括：组织者终端，被配置用于向服务器发送包括参与者信息的注册会话请求，与参与者终端建立直连并交互数据；服务器，被配置用于响应于接收到注册会话请求，将会话描述映射为流媒体描述文件，将参与者信息存储到流媒体描述文件中，响应于接收到参与者终端发送的获取流媒体描述文件的请求，向参与者终端发送流媒体描述文件；参与者终端，被配置用于从服务器获取流媒体描述文件，从流媒体描述文件中解析出连接信息，根据连接信息与组织者终端建立直连并交互数据。该实施方式能够承担大规模的用户同时在线，实时进行视觉和听觉交互，超低延迟，对创作内容进行版权、所有权保护。

技术领域

本公开的实施例涉及计算机技术领域，具体涉及实时交互流媒体系统。

背景技术

元宇宙(Metaverse)是人类运用数字技术构建的，由现实世界映射或超越现实世界，可与现实世界交互的虚拟世界，具备新型社会体系的数字生活空间。“元宇宙”本身并不是新技术，而是集成了一大批现有技术，包括5G、云计算、人工智能、虚拟现实、区块链、数字货币、物联网、人机交互等。

现有的实时交互流媒体的方法不能满足元宇宙的要求。例如，RTSP/RTP(实时流传输协议/实时传输协议，Real Time Streaming Protocol/Real Time TransportProtocol)实时媒体流使用推流的方式解决了一部分实时流传输的问题，能实现较低的延迟。但其因为是基于点对点的传输，无法针对多人参与的场景(即观看流，又发送流)，所以限制了其使用方式。

webRTC(Web Real-Time Communications，网页实时通信)的多人视频通话，会议技术(MESH)解决了基于浏览器如果何实现视频会议，团队线上工作流程的问题，能实现极低的延迟。但没有规定信令的方法和协议，导致各个产品的没有互通性。基于SDP(SessionDescription Protocol，会话描述协议)描述配置，协议比较简陋，对应高级实时流推送来说，缺少大量配置信息，虽然可以使用自定义扩展，但使用自定义的扩展，则更进一步导致了各个产品实现的碎片化。需要额外的信令服务器，信令服务器的不通，局限了其使用。没有统一的会话建立机制。没有字幕、时间元数据、广告管理，数字版权保护，高级编码格式的优势。

基于webRTC的SFU(select forward unit，选择转发单元)改进，虽然能够部分解决了多人参与的问题，通过选择需要转发的媒体流，生成一个转发矩阵，来实现多人会议。但是当参与的人数较多时，转发矩阵会非常复杂，当人数达到一定程度时，过于复杂的转发矩阵无法设计与实现，制了人数上限。

基于webRTC的MCU(multipoint control unit，多点控制单元)改进，来扩展基础的webRTC实现多人的在线会议，虽然解决了多人参与的问题，但由于需要在服务端进行转码、混合，虽然技术上能实现大规模同时在线人数，但是服务端的性能需求会大量增加。

发明内容

本公开的实施例提出了实时交互流媒体系统。

本公开的实施例提供了一种实时交互流媒体系统，包括：组织者终端，被配置用于向服务器发送包括参与者信息的注册会话请求，与参与者终端建立直连并交互数据；服务器，被配置用于响应于接收到所述注册会话请求，将会话描述映射为流媒体描述文件，将所述参与者信息存储到所述流媒体描述文件中，响应于接收到参与者终端发送的获取流媒体描述文件的请求，向所述参与者终端发送所述流媒体描述文件；参与者终端，被配置用于从所述服务器获取所述流媒体描述文件，从所述流媒体描述文件中解析出连接信息，根据所述连接信息与组织者终端建立直连并交互数据。

在一些实施例中，所述组织者终端进一步被配置用于向所述服务器发送以下至少一种事件信息：控制信息、元宇宙信息、媒体信息；所述服务器进一步被配置用于根据所述事件信息更新流媒体描述文件；所述参与者终端进一步被配置用于定时从所述服务器获取更新后的流媒体描述文件，并根据更新后的流媒体描述文件进行事件处理。