用FFMPEG SDK進行視頻轉碼壓縮時解決音視頻不同步問題的方法

      用FFMPEG SDK進行視頻轉碼壓縮的時候，轉碼成功後去看視頻的內容，發現音視頻是不同步的。這個的確是一個惱火的事情。我在用FFMPEG SDK做h264格式的FLV檔案編碼Filter的時候就碰到了這個問題。
        經過研究發現，FFMPEG SDK寫入視頻的時候有兩個地方用來控制寫入的時間戳記，一個是AvPacket,
一個是AvFrame。
在調用avcodec_encode_video的時候需要傳入AvFrame的對象指標，也就是傳入一幀未壓縮的視頻進行壓縮處理，AvFrame包含
一個pts的參數，這個參數就是當前幀將來在還原播放的時候的時間戳記。而AvPacket裡面也有pts，還有dts。說起這個就必須要說明一下
I,P,B三種視頻壓縮幀。I幀就是主要畫面格，不依賴於其他視訊框架，P幀是向前預測的幀，只依賴於前面的視訊框架，而B幀是雙向預測視訊框架，依賴於前後視頻
幀。由於B幀的存在，因為它是雙向的，必須知道前面的視訊框架和後面的視訊框架的詳細內容後，才能知道本B幀最終該呈現什麼映像。而pts和dts兩個參數就
是用來控制視訊框架的顯示和解碼的順序。
      pts就是幀顯示的順序。
      dts就是幀被讀取進行解碼的順序。
     如果沒有B幀存在，dts和pts是相同的。反之，則是不相同的。關於這個的詳細介紹可以參考一下mpeg的原理。
再說說AvPacket中包含的pts和dts兩個到底該設定什麼值？
pts和dts需要設定的就是視訊框架解碼和顯示的順序。每增加一幀就加一，並不是播放視頻的時間戳記。
但是實踐證明經過rmvb解碼的視頻有時候並不是固定幀率的，而是變幀率的，這樣，如果每壓縮一幀，pts和dts加一的方案為導致音視頻不同步。
那怎麼來解決音視頻同步的問題呢？
請看如下程式碼片段。
lTimeStamp 是通過directshow 擷取的當前的視訊框架的時間戳記。
m_llframe_index為當前已經經過壓縮處理的幀的數量。
首先av_rescale計算得到當前壓縮處理已經需要處理什麼時間戳記的視訊框架，如果該時間戳記尚未到達directshow當前提供的視訊框架的時間戳記，則將該幀丟棄掉。
否則進行壓縮操作。並設定AVPacket的pts和dts。這裡假設B幀不存在。
因為在將來播放的時候視頻以我們設定的固定播放幀率進行播放，所以需要根據設定的播放幀率計算得到的視訊框架時間戳記和directshow提供的當前視訊框架
的時間戳記進行比較，設定是否需要進行實施延緩播放的策略。如果需要延緩播放，則將pts增加步長2，否則以普通速度播放，則設定為1.dts與之相同。
__int64 x =av_rescale(m_llframe_index,AV_TIME_BASE*(int64_t)c->time_base.num,c->time_base.den);
if( x > lTimeStamp )
{
return TRUE;
}
m_pVideoFrame2->pts = lTimeStamp;
m_pVideoFrame2->pict_type = 0;
int out_size = avcodec_encode_video( c, m_pvideo_outbuf, video_outbuf_size,m_pVideoFrame2 );
if (out_size > 0)
{
AVPacket pkt;
av_init_packet(&pkt);
if( x > lTimeStamp )
{
   pkt.pts = pkt.dts = m_llframe_index;
   pkt.duration = 0;
}
else
{
   pkt.duration = (lTimeStamp - x)*c->time_base.den/1000000 + 1;
   pkt.pts = m_llframe_index;
   pkt.dts = pkt.pts;
   m_llframe_index += pkt.duration;
}
//pkt.pts = lTimeStamp * (__int64)frame_rate.den / 1000;
if( c->coded_frame && c->coded_frame->key_frame )
{
    pkt.flags |= PKT_FLAG_KEY;
}
pkt.stream_index= m_pVideoStream->index;
pkt.data= m_pvideo_outbuf;
pkt.size= out_size;

ret = av_interleaved_write_frame( m_pAvFormatContext, &pkt );
}
else
{
ret = 0;
}