[发明专利]一种基于浏览器的音频/视频直播方法及其系统

摘要

本发明公开了一种基于浏览器的音频/视频直播方法及其系统，其中，该方法包括以下步骤：建立与用户设备上的浏览器之间的本地socket通信，图像采集、处理、编码，音频采集、处理、编码，丢弃超时的音频帧，保证音频帧与图像帧同步，进而将同步后的音频帧与图像帧按RTMP协议进行打包和发送，监控设备运行与网络丢包情况进而动态调节图像质量，本地保存。本发明采用了基于浏览器的插件策略，安装后可以非常方便地在后台自启动并且会准备地相应来自浏览器的开始推流、停止推流、切换CDN、报告当前状态、断网重连指令，内部模块自动协同工作，真正做到一条命令实现直播的需要。

主权项

1.一种基于浏览器的音频/视频直播方法，其特征在于，包括以下步骤：建立与用户设备上的浏览器之间的本地socket通信；对所述用户设备所装载的实体摄像头和用户设备上所安装的虚拟摄像头按照所述浏览器传来的具体图像参数进行图像捕获，并将所述捕获到的图像根据图像帧加入到图像帧队列；将所述捕捉到的图像统一转换成YUV420P格式；按照所述浏览器传来的图像编码参数对所述YUV420P格式图像进行h264编码；按照所述浏览器传来的音频捕获参数调用Windows Core API对用户设备所装载的麦克风设备进行音频采集，对所述采集到的音频样本按预设要求进行重采样并转换为指定的采样率和通道数，进而加入到音频帧队列；对所述音频帧队列中的音频帧里的音频数据进行声音特征分析；按照所述浏览器传来的音频编码参数对所述音频进行aac编码或是mp3编码；丢弃超时的音频帧，保证音频帧与图像帧同步，进而将所述同步后的音频帧与图像帧按RTMP协议进行打包和发送。