[发明专利]一种全景声音频处理方法

摘要

本发明公开了一种全景声音频处理方法，所述方法包括：服务器端获取不同格式的音频信号，转码获得中间格式音频信号；对中间格式音频信号叠加，得到输出给客户端的中间格式音频信号；客户端从服务器端获取输出给客户端的中间格式音频信号；获取头部旋转方向；解码获得全景声双耳信号。所述方法能够有效且高质量地生成全景声，全景声在服务器端经过处理，统一为中间格式，很好地改善了全景声内容格式的兼容性，减小了网络带宽占用量并且减轻了客户端的处理复杂度，解决了现有客户端无法有效、高效地播放各种格式的全景声内容的问题。头部旋转的全景声渲染在客户端完成，也满足了头部追踪低延时的需求，尤其适用于虚拟现实的应用。

主权项

1.一种全景声音频处理方法，其特征在于，所述全景声音频处理方法包括以下步骤：服务器端获取不同格式的音频信号，对不同格式的音频信号进行转码获得中间格式音频信号，服务器端对所述不同格式的音频信号转码为统一的中间格式音频信号；对所述中间格式音频信号叠加，得到输出给客户端的中间格式音频信号；客户端从服务器端获取输出给客户端的中间格式音频信号；获取头部旋转方向；解码获得全景声双耳信号；所述不同格式的音频信号包括多方向双耳录音信号、声场录音信号和音频对象信号；所述中间格式音频信号包括多路binaural信号和Ambisonic信号；服务器端对于中间格式音频信号为多路binaural信号的情况：将输入的多方向双耳录音信号、声场录音信号和音频对象信号都统一转码成多路binaural信号；将不同格式的音频信号转码成的多路binaural格式音频信号叠加，输出给客户端；客户端从服务器端接收到多路binaural格式音频信号，根据头部旋转方向插值还原播放全景声场；服务器端对于中间格式音频信号为Ambisonic信号的情况：将输入的多方向双耳录音信号、声场录音信号和音频对象信号都统一转码成Ambisonic信号；将不同格式转码成的Ambisonic格式信号叠加，输出给客户端；客户端从服务器端接收到Ambisonic格式信号，解码并根据头部旋转方向还原播放全景声场；服务器端对所述不同格式的音频信号混合地或动态地同时转码为多种中间格式音频信号。