FFmpeg深刻分析之零-基礎

FFmpeg是至關強大的多媒體編解碼框架，在深刻分析其源代碼以前必需要有基本的多媒 體基礎知識，不然其源代碼會很是晦澀難懂。本文將從介紹一些基本的多媒體只是，主要是爲研讀ffmpeg源代碼作準備，好比一些編解碼部分，只有真正瞭解 了多媒體處理的基本流程，研讀ffmpeg源代碼才能事半功倍。

下面分析一下多媒體中最基本最核心的視頻解碼過程，日常咱們從網上下載一部電影或者一首 歌曲，那麼相應的多媒體播放器爲咱們作好了一切工做，咱們只用欣賞就ok了。目前幾乎全部的主流多媒體播放器都是基於開源多媒體框架ffmpeg來作的， 可見ffmpeg的強大。下面是對一個媒體文件進行解碼的主要流程：

 

1.    解複用(Demux)  

當咱們打開一個多媒體文件以後，第一步就是解複用，稱之爲Demux。爲何須要這一 步，這一步到底是作什麼的？咱們知道在一個多媒體文件中，既包括音頻也包括視頻，並且音頻和視頻都是分開進行壓縮的，由於音頻和視頻的壓縮算法不同，既 然壓縮算法不同，那麼確定解碼也不同，因此須要對音頻和視頻分別進行解碼。雖然音頻和視頻是分開進行壓縮的，可是爲了傳輸過程的方便，將壓縮過的音頻 和視頻捆綁在一塊兒進行傳輸。因此咱們解碼的第一步就是將這些綁在一塊兒的音頻和視頻流分開來，也就是傳說中的解複用，因此一句話，解複用這一步就是將文件中 捆綁在一塊兒的音頻流和視頻流分開來以方便後面分別對它們進行解碼，下面是Demux以後的效果。  

2.    解碼(Decode)  

這一步不用多說，一個多媒體文件確定是通過某種或幾種格式的壓縮的，也就是一般所說的視頻和音頻編碼，編碼是爲了減小數據量，不然的話對咱們的存儲設備是一個挑戰，若是是流媒體的話對網絡帶寬也是一個幾乎不可能完成的任務。因此咱們必須對媒體信息進行儘量的壓縮。

3.    FFmpeg中解碼流程對應的API函數  

瞭解了上面的一個媒體文件從打開到解碼的流程，就能夠很輕鬆的閱讀ffmpeg代碼，ffmpeg的框架也基本是按照這個流程來的，但不是每一個流程對應一 個API，下面這副圖是我分析ffmpeg並根據本身的理解獲得的ffmpeg解碼流程對應的API，我想這幅圖應該對理解ffmpeg和編解碼有一些幫 助。

Ffmpeg中Demux這一步是經過avformat_open_input（）這個 api來作的，這個api讀出文件的頭部信息，並作demux，在此以後咱們就能夠讀取媒體文件中的音頻和視頻流，而後經過 av_read_frame()從音頻和視頻流中讀取出基本數據流packet，而後將packet送到avcodec_decode_video2() 和相對應的api進行解碼。

後續會對ffmpeg的代碼進行深刻探討，本文知識一個鋪墊！