[发明专利]用于在图像信号处理系统中同步音频和视频数据的技术

权利要求书

1.一种在电子设备上同步音频和视频数据的方法，包括：

利用图像信号处理器接收视频数据的图像帧，所述图像帧是利用电子设备的数字图像传感器获得的；

检测图像帧的开始；

当检测到图像帧的开始时，从被配置成提供与当前时间对应的时间戳值的时间码寄存器读取当前时间戳值；

使所述时间戳值与和所述图像帧相关联的一组元数据关联；和

利用与所述一组元数据关联的时间戳值，在电子设备上使图像帧的重放与和视频数据同时获得的一组音频数据的对应音频样本同步。

2.按照权利要求1所述的方法，其中，使时间戳值与所述一组元数据关联包括把时间戳值保存在与数字图像传感器相关联的时间戳寄存器中，和把保存在时间戳寄存器中的时间戳值写入所述一组元数据中。

3.按照权利要求1所述的方法，其中，根据图像信号处理器的时钟域，按用特定数目的时钟周期定义的间隔，递增时间码寄存器提供的时间戳值。

4.按照权利要求1所述的方法，其中在使时间戳值与所述一组元数据关联之前，在时间戳值中加入经编程的延迟。

5.一种系统，包括：

图像信号处理器，所述图像信号处理器包括被配置成接收利用数字图像传感器获得的多个图像帧的接口，其中，所述多个图像帧对应于一组视频数据；

音频子系统，所述音频子系统包括被配置成与数字图像传感器获得的图像数据同时地接收音频数据的输入设备；和

音频-视频同步逻辑器，所述音频-视频同步逻辑器被配置成对于多个图像帧中的每个图像帧，识别图像帧的开始，确定与图像帧的开始对应的时间戳值，并把所述时间戳值写入与图像帧相关联的元数据中；

其中，所述音频-视频同步逻辑器被配置成通过使保存在与多个图像帧中的每个图像帧相关联的元数据中的时间戳值和与音频数据相关联的对应时间戳关联，使多个图像帧与音频数据同步。

6.按照权利要求5所述的系统，其中，所述音频-视频同步逻辑器包含被配置成提供当前时间戳值的时间码寄存器，其中，按规律的间隔递增时间码寄存器提供的时间戳值。

7.按照权利要求6所述的系统，其中，图像信号处理器和音频子系统分别根据独立的第一时钟和第二时钟工作。

8.按照权利要求7所述的系统，其中，所述音频-视频同步逻辑器包含被配置成保存时间配置码的定时器配置寄存器，所述规律的间隔对应于作为时间配置码的函数确定的第一时钟的多个时钟周期。

9.按照权利要求7所述的系统，其中，所述音频-视频同步逻辑器被配置成使第一时钟与系统的主处理器的第三时钟同步，使第二时钟与系统的主处理器的第三时钟同步，根据第一时钟和第二时钟与第三时钟的同步，确定第一时钟和第二时钟之间的时间差，并利用所述时间差，使保存在多个图像帧中的每个图像帧的元数据中的时间戳值与和音频数据相关联的对应时间戳关联。

10.按照权利要求6所述的系统，其中，所述音频-视频同步逻辑器被配置成通过增加或丢弃图像帧，直到使对应于图像帧的时间戳与对应于音频数据的时间戳对准为止，来使所述多个图像帧与音频数据同步。

11.一种电子设备，包括：

用于检测电子设备的图像处理系统利用数字图像传感器获得的一组视频数据中的图像帧的开始的装置；

用于使时间戳值与和所述图像帧相关联的元数据关联的装置，其中，所述时间戳值对应于所述图像帧的开始；

用于利用所述时间戳值，使所述图像帧与电子设备获得的一组音频数据中的对应音频样本对准的装置。

12.按照权利要求11所述的电子设备，其中，用于使所述时间戳值与和所述图像帧相关联的元数据关联的装置包括：

用于从被配置成提供定期递增的当前时间值的第一寄存器读取时间戳值的装置；

用于把时间戳值写入与数字图像传感器相关联的第二寄存器的装置；和

用于把来自第二寄存器的时间戳值保存为与所述图像帧相关联的元数据的一部分的装置。