视频直播系统数据采集技术

2016/12/26 18:08:30

在这个互联网飞速发展的时代里，随着消费者的消费需求和交互方式的升级，基础设施也悄然革新。网络的完善及移动设备拍摄视频的强大能力催生了大家对视频直播领域的关注，吸引了不少的互联网巨头和知名企业进入该领域。

一、音视频处理流程：
数据采集→数据编码→数据传输(流媒体服务器) →解码数据→播放显示
二、数据采集：

数据采集是视频推流过程中的第一步，系统的基础设备获取原始视频数据，将其输出到下一个环节。

1、数据采集分类：

视频采集分为音频采集和图像采集两种不同的数据采集方法，并分别对应的输入源及数据格式完全不同。

     1）、音频采集
            音频数据是指采集外界的声音，即能以纯音频的方式，也可以与图像相结合。音频采集过程主要是通过设备将环境中的信号采集成PCM编码的原始数据，然后编码压缩成MP3等格式的数据分发出去。常见的音频压缩格式有：MP3、AAC、OGG、WMA、Opus、FLAC、APE、m4a和AMR等。
     2）、图像采集
           图像数据是将图片组合成一组或更多组的连续播放的动画，构成可肉眼观看的视频。图像的采集过程主要由摄像头等设备拍摄成YUV编码的原始数据，然后经过编码压缩成H.264等格式的数据分发出去。常见的视频封装格式有：MP4、3GP、AVI、MKV、WMV、MPG、VOB、FLV、SWF、MOV、RMVB和WebM等。
2、技术难点：

音频采集的技术难点有：降低延迟、减少卡顿、消噪、消除回声、静音检测（VAD）和各种混音算法等。图像采集的技术难点有：降低延迟、减少卡顿、兼容性及各种对图像的处理操作如美颜和水印等。

3、技术参数：
1）、主要音频技术参数：
采样率：采样率越高，所用数据量就越大，音频质量就越高；

位宽：位数越多，表示的就越精细，声音质量就越好，常见的位宽是：4bit、 8bit、16bit、32bit。

声道数：分为1和2，分别表示单身道和双声道；音频帧：一般2.5ms-60ms为一帧音频。

     2）、主要图像技术参数：
   图像格式：一般采用与格式存储原始数据信息；
   传输通道：为360度角度拍摄需求，一般多通道传输合成；
   分辨率：一般以原始视频分辨率为基础；
   采集频率：采集高度图像时，要注意采样频率，采样率越高，图像质量越高。
4、采集源：
     1）、摄像头采集：
   摄像头采集是目前最为常见的一种数据采集方式，也是最方便最简单的一种；
     2）、屏幕录制：
   屏幕录制采集方式，目前游戏行业运用比较多。