[发明专利]一种实时远程音视频的直播方法及其装置

说明书

技术领域

本申请涉及信息处理技术领域，特别涉及一种实时远程视音频的直播方法及其对应的装置。

背景技术

随着互联网技术和音视频编码技术的发展，实时远程音视频直播得到极大推广。Adobe依托flashplayer技术，推出了其自己的实时远程视音频直播技术：RTMP直播技术。该直播技术在Adobe依托的flashplayer技术基础上，先通过摄像头和麦克风采集音视频数据，然后进行H264编码和AAC编码，再通过RTMP协议将视频和音频数据的封装体发送到流媒体服务器，供本地播放器下载播放。这种直播技术虽然将实时远程音视频直播技术推向一个新的水平，但是，由于flashplayer技术运行在虚拟机上，其存在远程安全沙箱和本地安全沙箱的限制，远程安全沙箱限制使flashplayer在没有配置跨域安全策略的情况下，不能进行跨域访问，本地安全沙箱使flashplayer在本地运行时本地资源和端口等策略受到访问限制，从而导致实时远程音视频的直播受到应用场景的束缚，无法满足用户的需求。此外，flashplayer技术由于还采取阻塞方式的单线程模式运行，使flashplayer不能进行连续的大数据量运算，这限制了实时远程音视频直播功能的拓展。

发明内容

为解决上述技术问题，本申请实施例提供了一种实时远程音视频的直播方法及其对应的装置，以使实时远程音视频的直播摆脱应用场景的限制。

本申请实施例提供的实时远程音视频的直播方法包括：

通过浏览器上设置的插件调用音视频采集程序采集音视频数据；

将音视频数据进行编码后发送到流媒体服务器；

播放器从流媒体服务器上获取音视频数据进行直播。

优选地，在浏览器上注册插件，当插件受到触发时，插件通过Directshow启动采集音视频数据。

进一步优选地，所述插件通过Directshow启动采集音视频数据具体包括：插件通过Directshow的SampleGrabberCB接口启动SampleGrabber采集音视频数据。

优选地，所述将音视频数据进行编码后发送到流媒体服务器具体包括：

采用一个线程对音频数据进行编码，采用一个线程对视频数据进行编码，将编码后的音频数据和视频数据封装后发送到流媒体服务器。

进一步优选地，所述将音视频数据进行编码后发送到流媒体服务器具体为：初始化音频编码器，在AudioEncoderThread线程控制下循环调用DSVideoGraph从SampleGrabber中取出音频帧进行音频编码；初始化视频编码器，在VideoEncoderThread线程控制下循环调用DSAudioGraph从SampleGrabber中取出视频帧进行视频编码，将编码后的音频数据和视频数据通过RtmpThread线程进行循环封装后通过Rtmp协议发送到流媒体服务器。

优选地，所述调用音视频采集程序采集音视频数据具体包括：调用音视频采集程序按照预设采样率采集音频数据，按照预设帧率采集视频数据；

所述将音视频数据进行编码具体包括：采用H264编码器对视频数据进行编码，在对视频数据进行编码之前根据适应预设帧率的原则修改H264编码库；采用AAC编码器对音频数据进行编码，在对音频数据进行编码之前根据适应预设采样率的原则修改AAC编码库。

本申请还提供了一种实时远程音视频的直播装置。该装置包括：采集程序调用单元、音视频数据编码单元和直播单元，其中：

采集程序调用单元，用于通过浏览器上设置的插件调用音视频采集程序采集音视频数据；

音视频数据编码单元，用于对音视频数据进行编码；

直播单元，用于从流媒体服务器上获取音视频数据进行直播。

优选地，所述装置还包括注册单元，用于在浏览器上注册插件；

当插件受到触发时，采集程序调用单元通过插件的Directshow启动采集音视频数据。

进一步优选地，所述采集程序调用单元通过插件的Directshow的SampleGrabberCB接口启动SampleGrabber采集音视频数据。

进一步优选地，所述音视频编码单元包括音频编码子单元、视频编码子单元和音视频数据封装子单元，其中：

所述音频编码子单元采用一个线程对音频数据进行编码；

所述视频编码子单元采用一个线程对视频数据编码；