[发明专利]增强3D音频/视频处理装置和方法

说明书

技术领域

本发明涉及无线通信系统，并且更具体地说，涉及用于处理增强三维(3D)音频和视频数据的方法和装置，并且更具体地说，涉及处理增强3D音频/视频数据，以利用MPEG文件格式(MPEG file format)执行用信号通知基于3D视频深度来控制3D音频深度的深度关联信息的方法和装置。

背景技术

随着三维(3-Dimensional,3D)电视(TV)的广泛使用，基于存储介质的3D视频内容和基于数字广播的3D视频内容传输已经快速得到广泛使用。另外，基于3D效果的3D音频内容不仅被广泛应用于视频内容而且应用于音频内容。

随着数字技术的日益增长的开发，用户已经连续请求更精确的音频/视频(A/V)体验。为最大化响应于用户需求的A/V体验(experience)，已经出现应用了能够应用于普通家庭影院系统(Home Theater System,HTS)的立体声(stereo sound)和环绕声(surround sound)技术的先进声音系统(advanced sound system)。

因为大部分TV或HTS具有两个扬声器，所以通常使用立体声系统来向用户提供声音体验。然而，因为高端(high-end)HTS具有两个或更多个扬声器，所以环绕声系统已经被广泛用于向用户提供更柔和且精确的声音体验。

近来，已经密集讨论了在3D声音空间内再现方向和距离以生成3D声音效果，由此提供3D声音的3D音频技术。在该3D音频技术中，声音再现被控制的最佳听音位置(acoustic sweet spot)，即，用户可以听到最佳声音的位置或范围，可以是3D空间和用户可听声音的某些部分。

另外，3D视频技术和3D音频技术可以分别应用至内容，并且针对同时应用了3D视频技术和3D音频技术的3D内容的需求在快速增加。即，尽管针对利用传统3D视频技术和传统3D音频技术来独立地应用3D视频效果和3D音频效果的3D内容的需求在增加，但针对通过在3D视频效果与3D音频效果之间的同步而获取的3D内容的需求在更快速增加。

发明内容

技术问题

本发明的目的是，提供处理增强3D音频/视频数据，其利用MPEG文件格式来执行用信号通知深度信息，以响应于3D视频的深度来生成3D音频效果，使得3D视频效果与3D音频效果同步的方法和装置。

技术解决方案

本发明的目的可以通过提供一种增强(enhanced)三维(3D)音频/视频(A/V)处理方法来实现，该方法包括以下步骤：生成包括视频内容和音频内容的三维(3-Dimensional,3D)内容；生成构成所述视频内容的视频帧的深度信息，以及生成包括生成的所述3D内容和所述深度信息的3D增强信号。所述深度信息被用于生成要应用至所述音频内容的3D音频效果，所述深度信息包括帧标识信息、深度级(depthlevel)信息以及深度范围(depth range)信息。所述帧标识信息指示用于标识每个视频帧的帧号码，所述深度级信息指示要应用至每个视频帧的3D效果的程度，并且所述深度范围信息指示所述深度级的总级数。

根据本发明的另一方面，一种增强(enhanced)三维(3-Dimensional,3D)音频/视频(A/V)处理方法，该方法包括以下步骤：处理包括3D内容的三维(3D)增强信号，该3D内容被构造成具有视频内容和音频内容；从处理的所述3D增强信号获取构成所述视频内容的视频帧的深度信息；根据所获取的所述深度信息生成3D音频效果；以及基于所生成的所述3D音频效果生成3D音频内容。所述深度信息被用于生成要应用至所述音频内容的3D音频效果，所述深度信息包括帧标识信息、深度级(depth level)信息以及深度范围(depth range)信息。所述帧标识信息指示用于标识每个视频帧的帧号码，所述深度级信息指示要应用至每个视频帧的3D效果的程度，并且所述深度范围信息指示所述深度级的总级数。

有益效果

如根据上面的描述明显的是，该增强3D A/V装置可以利用基于3D视频深度的信令信息来生成3D声音效果，使得其可以提供3D视频数据和3D音频数据被正确同步的3D内容。

根据本发明，该增强3D A/V装置可以利用基于3D视频深度的信令信息来生成3D声音效果，从而降低装置设计的复杂性。

根据本发明，当发送基于3D视频深度的信令信息时，该增强3D A/V装置去除冗余信息，并且发送除了该冗余信息以外的剩余信息，从而获取较高的发送效率。

附图说明

图1是例示音频系统的发展过程的概念图。