[发明专利]帧率控制方法以及帧率控制装置

说明书

技术领域

本发明涉及视频编码中的帧率控制，特别是涉及用于抑制编码器中的运算量和信息量的帧率控制方法、帧率控制装置以及帧率控制程序。

本申请基于在2012年1月26日向日本申请的特愿2012–013773号要求优先权，并将其内容引用于此。

背景技术

历来，在能编码的帧率和从摄像设备等向编码器的输入视频的帧率不同的情况下，使用进行输入视频的细化（thinning）处理来变换为能编码的帧率的技术（参照专利文献1）。

在图5中示出了表示现有技术的装置的结构的框图。在图6中示出了现有技术中的画面细化判定部的流程图。

在图5中，编码器200是按照例如H. 264等编码方式来对输入视频进行编码、输出编码视频流的装置。编码器200具备：按照将帧分割后的每个块进行运动检测的运动检测部203、利用由运动检测部203检测出的运动矢量来进行预测的预测部204、通过DCT（离散余弦变换）等对输入信号和预测信号的残差信号进行正交变换的正交变换部205、对变换系数进行量化的量化部206、对量化结果进行逆量化的逆量化部207、对变换系数进行逆正交变换的逆正交变换部208、存储对逆正交变换部208的输出加上预测信号而得到的本地解码图像的本地解码图像存储部209、对量化部206的输出进行可变长编码的可变长编码部210、对编码信息进行复用的复用部211、对编码信息进行存储并作为编码视频流进行输出的缓冲器部212、以及利用产生码量等进行量化部206等的编码控制的控制部213。

在编码器200能编码的帧率和帧率测定部202测定出的从摄像设备等向编码器200的输入视频的帧率不同的情况下，画面细化判定部201进行输入视频的细化处理来变换为能编码的帧率。帧率测定部202对输入视频的帧率进行测定并通知给画面细化判定部201。

画面细化判定部201执行图6所示的处理。首先，当对编码器200能输入的帧率TA进行设定（步骤S200），并且，将输入视频的帧率设为CA时（步骤S201），根据CA计算细化帧间隔值n=CA/（CA–TA）（步骤S202）。接着，将画面编号i初始设定为1，将画面细化数d初始设定为0（步骤S203），进行以下的处理。

根据作为判定对象的画面的画面编号i是否超过n乘以到目前为止的画面细化数d的值来决定是否对画面i进行细化。即，判定是否为i≥n×（d+1），如果i在n×（d+1）以上，则执行步骤S205、S206。在步骤S205中，对d加上1，在步骤S206中，对画面i进行细化。如果i比n×（d+1）小，则不对画面i进行细化。在全部视频的处理完成之前（步骤S207为“是”），一边对i加上1（步骤S208），一边重复进行以上的步骤S204～S207。

如以上那样，在现有技术中，根据向编码器的输入帧率和能编码的帧率的比率，计算表示只要输入了多少个视频画面就可以细化1个画面的画面细化数，按照计算出的画面细化数来进行输入视频的细化处理。

为了应用本技术，需要向编码器的输入帧率CA是已知的。因此，需要通过例如在图5中示出的帧率测定部202来测定向编码器的输入视频的帧率CA。可是，在输入视频的输入定时波动的情况下等，不一定总是保持测定时的帧率。因此，会产生不必要地细化许多画面的状态或者细化数不足的状态。

现有技术文献

专利文献

专利文献1：日本特开2005–328487号公报。

发明内容

发明要解决的课题

设想：在电视电话那样的视频通信用应用中，用与PC（个人计算机）连接的Web摄像机等输入视频，用软件编码器进行编码，将编码后的视频流传送到接收侧。此时，由于CPU（中央处理装置）资源不足等理由，存在用摄像机拍摄的视频被输入至编码器的定时不是固定的而是波动的情况。在这样的情况下，每单位时间的输入帧率可能局部地变高。

在图7中示出视频的输入定时波动的例子。虽然以固定的定时的固定帧率执行利用摄像机进行的拍摄，但是，由于在刚输入了画面2之后CPU资源不足、编码器前级的处理延迟导致画面3以后被依次延迟地输入至编码器。之后，CPU资源的不足解除，积存在编码器前级的视频被一口气输入至编码器。