带你进入Android音视频世界之（一）音视频基础知识

首先让我们一起了解下音视频的基础知识。

1、视频编码&＃xff1a;

    视频编码是指通过特定的压缩技术&＃xff0c;将某个视频文件转换成另外一种视频格式文件的方式。目前最重要的编解码标准有&＃xff1a;

从某种意义上讲视频编码可以分为两个系列&＃xff1a;

• MPEG系列&＃xff1a;

注&＃xff1a;DVD音频技术没有采用MPEG的&＃xff1b;

• H.26X 系列&＃xff1a;

    由ITU主导&＃xff0c;侧重网络传输&＃xff0c; 注意&＃xff1a;只有视频编码。

   包括H.261、H.262、H.263、H.263&＃43;、H.263&＃43;&＃43;、H.264 (MPEG4 ACV合作的结晶)

2、音频编码&＃xff1a;

    常见的音频格式有AAC、MP3、AC3&＃xff1b;

• AAC:一种专为声音数据设计的文件压缩格式&＃xff0c;与MP3不同&＃xff0c;他采用了全新的算法进行编码&＃xff0c;更加高效&＃xff0c;具有更高的“性价比”。声音质量几乎没有明显的降低的前提下&＃xff0c;保证了文件的小巧型。苹果iPod、诺基亚手机也支持AAC格式的音频文件。但是&＃xff0c;AAC属于有损压缩&＃xff1b;

• MP3: 是一种音频压缩技术&＃xff0c;全称是动态影像专家压缩标准音频层面&＃xff08;Moving Picture Experts Group Audio Layer III&＃xff09;&＃xff0c;简称MP3。被设计用来大幅度地降低音频数据量。利用MP3技术&＃xff0c;将音乐一1:10甚至1:12的压缩率&＃xff0c;压缩成容量较小的文件&＃xff0c;对于大多数用户来说&＃xff0c;重放的音质与最初的不压缩音频没有明显下降&＃xff1b;MP3利用人耳对高频声音信号不敏感的特性&＃xff0c;将时域波形信号转换成频域信号&＃xff0c;并划分成多个频段&＃xff0c;对不同频段使用不同的压缩率&＃xff0c;对高频信号使用大压缩率升至忽略信号&＃xff0c;对低频信号使用小压缩率&＃xff0c;保证信号不失真。等于抛弃了人耳基本听不到的高频声音&＃xff0c;只保留了能听到的低频部分&＃xff0c;从而实现1:10甚至1:12的压缩率压缩。

• AC3:全称为Audio Coding Version 3,是Dolby实验室锁发展的有损音频编码格式。AC3被广泛应用于5.1省道&＃xff0c;是Dolby Pro Logic的继承者&＃xff0c;不同的地方在于AC3提供了6个独立的声道而Pro Logic混合其环绕声道。AC3以348~448kb/s的码率应用于激光唱片和DVD&＃xff0c;也经常以640kbs/s的码率应用于电影院。Dolby AC3提供的环绕声系统由5个全频域声道和一个超低音声道组成&＃xff0c;被称为5.1声道。5个全频域声道包括左前&＃xff0c;中央&＃xff0c;右前&＃xff0c;左后、右后。超低音声道主要提供一些二外的低音信息&＃xff0c;是特殊场景例如爆炸&＃xff0c;撞击等的声音效果更好。

3、多媒体播放组件&＃xff1a;

    Android多媒体播放组件包含MediaPlayer、MediaCodec、OMX、StageFright、AudioTrack等&＃xff1b;

• MediaPlayer&＃xff1a;播放控制。

• MediaCodec&＃xff1a;音视频编解码。

• OMX&＃xff1a;多媒体部分采用的编解码标准。

• StageFright&＃xff1a;是一个播放框架、替代之前的OpenCore,主要是做了一个OMX层&＃xff0c;仅仅对OpenCore的omx-component部分做了引用。StageFright是在MediaPlayerService这一层加入的&＃xff0c;和OpenCore是并列的。StageFright在Android中是以共享库的形式存在的&＃xff08;libstagefright.so&＃xff09;,其中的module–NuPlayer/AwesomePlayer 可用来播放音视频&＃xff0c;提供了许多API&＃xff0c;可以让生成的应用程序&＃xff08;JAVA/JNI&＃xff09;调用。

• MediaPlayer&＃xff1a;音频播放。

4、多媒体框架及解决方案&＃xff1a;

   常见的播放框架及解决方案有VLC.FFmpeg,GStreamer等。