[发明专利]集成音频和视频会议能力

说明书

技术领域

本公开涉及视频会议，特别是涉及集成音频和视频会议能力。

背景技术

大多数的视频会议系统是“一体化”装置。这些系统常常需要诸如麦克风、扬声器、监视器和照相机的各种部件之间的有线连接。在某些情况下，诸如无线HDMI和无线USB的近年的无线技术允许这些部件中的一些被无线连接。但是，这些无线连接一般固定于无线连接的部件之间，并因此限制可动性。并且，由于诸如计算机和电话的大多数的装置一般不具有内置的无线HDMI或无线USB能力，因此它们需要硬件“软件狗”或适配器以提供与其它部件的无线连接性。对于用户来说，这使事情大大复杂化。

并且，当前的视频会议系统没有利用诸如WIFI Direct的其它的新型强大的无线技术以集成不同的装置或部件。并且，当前的方案无法使用无线能力以提供更大的可动性，同时允许装置在会议中无缝地集成其它的装置并自动地扩展在会议中利用的会议能力。例如，当前的方案在单纯音频会议装置进入具有无线能力的视频会议装置附近时不允许单纯音频会议装置自动地向音频会议添加视频会议。在当前的方案中，如果用户通过移动电话处于单纯音频呼叫上并且用户希望添加超出移动电话能力的高质量视频，那么用户必须在另一装置上手动迁移或重新建立整个呼叫。

发明内容

在以下的说明书中阐述并且部分地从说明书理解或者可通过这里公开的原理的实际掌握本公开的附加的特征和优点。可通过特别地在所附的权利要求中指出的仪器和组合实现和获得本公开的特征和优点。公开的这些和其它特征从以下的描述和所附的权利要求将变得更加明显，或者可通过这里阐述的原理的实际被掌握。

这里阐述的方法可被用于无线集成会议系统中的不同的装置和部件。通过使用强大的无线能力，这些方法在会议中向用户提供很大的可动性，并且允许会议装置在会议中无缝地集成其它的装置并自动扩展在会议中利用的会议能力。例如，通过单纯音频电话参与单纯音频会议的用户可通过与具有视频能力的附近装置无线连接自动向会议添加高质量视频。如果用户希望移动到不同的位置，她可自动地向具有视频能力的另外的附近装置无线传送会议的视频部分。另一方面，如果用户不希望移动到不同的位置而只希望向具有更好的视频能力的不同的装置传送会议的视频部分，那么她可在不传送或重新建立整个电话的情况下通过无线连接自动完成这一点。

公开用于集成音频和视频会议能力的系统、方法和非暂时性计算机可读存储介质。在第一装置与第二装置之间的通信会话中，第一装置接收来自用户的通信会话的音频部分。第一装置然后通过无线连接接收来自第三装置的通信会话的视频部分。第一装置可建立通信会话作为单纯音频通信会话并随后向第三装置发送消息以初始化视频输入和输出以建立用于通信会话的视频能力。通信会话的视频部分可包含由诸如内部照相机或外部照相机的与第三装置相关的照相机捕获的压缩视频帧。第三装置可以是具有无线能力的任何装置。例如，第三装置可以是向第一装置传送从照相机装置捕获的视频帧的无线会议网关。第三装置还可包含视频编码器/解码器、照相机、无线接口和/或视频输出。例如，无线连接可以是装置之间的直接无线连接。例如，直接无线连接可基于802.11标准。这里，装置可通过使用诸如WIFI Direct的无线标准直接相互连接。并且，装置可完成无线配对以允许装置无缝地相互通信。

然后，第一装置使通信会话的音频部分与通信会话的视频部分同步化，以产生通信会话的同步化的音频和视频部分。为了使通信会话的音频和视频部分同步化，第一装置可通过来自通信会话的音频部分的音频设定通信会话的视频部分上的唇音同步化属性。然后，第一装置向第二装置发送通信会话的同步化的音频和视频部分。如果第一装置从第二装置接收与通信会话相关的视频和/或音频帧，那么第一装置可检查视频帧上的唇音同步化属性，并且，在至少部分地基于唇音同步化属性的时间，向第三装置发送视频帧以将其解码并在第三装置上显示。因此，第三装置可显示从第二装置接收的视频帧，同时第一装置输出从第二装置接收的相应的音频帧。

可通过周期性地同步化多个装置之间的时钟实现唇音同步化。通过使用公知的算法，一个装置可用作主机，其它的装置可用作从属机，这里，主机和从属机交换网络消息以使它们的时钟同步化。因此，例如，第一装置和第三装置可针对唇音同步化周期性地使它们的时钟同步化。通过使用公知的算法，第一装置或第三装置可用作主机装置，而其它的装置可用作从属装置。然后，为了基于唇音同步化属性执行唇音同步化，主机装置（例如，第一装置）和从属装置（例如，第三装置）可交换网络消息以使它们的时钟同步化。