牽著老婆滿街逛

嚴以律己,寬以待人. 三思而后行.
GMail/GTalk: yanglinbo#google.com;
MSN/Email: tx7do#yahoo.com.cn;
QQ: 3 0 3 3 9 6 9 2 0 .

統計

隨筆 - 1513
文章 - 45
評論 - 907
引用 - 0

公告

言論：
1.每日自省；
2.享受人生；
3.盡力而為；
4.堅持不懈；
5.切莫急躁；
6.慎言敏行；
7.動心忍性；
8.上善若水。

常用鏈接

留言簿(11)

隨筆分類(466)

隨筆檔案(1513)

文章分類(46)

文章檔案(45)

相冊

收藏夾(39)

搜索

積分與排名

積分 - 2523963
排名 - 2

閱讀排行榜

用FFMPEG SDK進行視頻轉碼壓縮時解決音視頻不同步問題的方法

轉載自:http://blog.sina.com.cn/s/blog_6281e5750100vhn5.html

用FFMPEG SDK進行視頻轉碼壓縮的時候，轉碼成功后去看視頻的內容，發現音視頻是不同步的。這個的確是一個惱火的事情。我在用FFMPEG SDK做h264格式的FLV文件編碼Filter的時候就碰到了這個問題。

經過研究發現，FFMPEG SDK寫入視頻的時候有兩個地方用來控制寫入的時間戳，一個是AvPacket, 一個是AvFrame。在調用avcodec_encode_video的時候需要傳入AvFrame的對象指針，也就是傳入一幀未壓縮的視頻進行壓縮處理，AvFrame包含一個pts的參數，這個參數就是當前幀將來在還原播放的時候的時間戳。而AvPacket里面也有pts，還有dts。說起這個就必須要說明一下I,P,B三種視頻壓縮幀。I幀就是關鍵幀，不依賴于其他視頻幀，P幀是向前預測的幀，只依賴于前面的視頻幀，而B幀是雙向預測視頻幀，依賴于前后視頻幀。由于B幀的存在，因為它是雙向的，必須知道前面的視頻幀和后面的視頻幀的詳細內容后，才能知道本B幀最終該呈現什么圖像。而pts和dts兩個參數就是用來控制視頻幀的顯示和解碼的順序。

pts就是幀顯示的順序。

dts就是幀被讀取進行解碼的順序。

如果沒有B幀存在，dts和pts是相同的。反之，則是不相同的。關于這個的詳細介紹可以參考一下mpeg的原理。

再說說AvPacket中包含的pts和dts兩個到底該設置什么值？

pts和dts需要設置的就是視頻幀解碼和顯示的順序。每增加一幀就加一，并不是播放視頻的時間戳。

但是實踐證明經過rmvb解碼的視頻有時候并不是固定幀率的，而是變幀率的，這樣，如果每壓縮一幀，pts和dts加一的方案為導致音視頻不同步。

那怎么來解決音視頻同步的問題呢？

請看如下代碼段。

lTimeStamp 是通過directshow 獲取的當前的視頻幀的時間戳。

m_llframe_index為當前已經經過壓縮處理的幀的數量。

首先av_rescale計算得到當前壓縮處理已經需要處理什么時間戳的視頻幀，如果該時間戳尚未到達directshow當前提供的視頻幀的時間戳，則將該幀丟棄掉。

否則進行壓縮操作。并設置AVPacket的pts和dts。這里假設B幀不存在。

因為在將來播放的時候視頻以我們設定的固定播放幀率進行播放，所以需要根據設定的播放幀率計算得到的視頻幀時間戳和directshow提供的當前視頻幀的時間戳進行比較，設定是否需要進行實施延緩播放的策略。如果需要延緩播放，則將pts增加步長2，否則以普通速度播放，則設置為1.dts與之相同。

__int64 x = av_rescale(m_llframe_index,AV_TIME_BASE*(int64_t)c->time_base.num,c->time_base.den);

if( x > lTimeStamp )

{

return TRUE;

}

m_pVideoFrame2->pts = lTimeStamp;

m_pVideoFrame2->pict_type = 0;

int out_size = avcodec_encode_video( c, m_pvideo_outbuf, video_outbuf_size, m_pVideoFrame2 );

if (out_size > 0)

{

AVPacket pkt;

av_init_packet(&pkt);

if( x > lTimeStamp )

{

pkt.pts = pkt.dts = m_llframe_index;

pkt.duration = 0;

}

else

{

pkt.duration = (lTimeStamp - x)*c->time_base.den/1000000 + 1;

pkt.pts = m_llframe_index;

pkt.dts = pkt.pts;

m_llframe_index += pkt.duration;

}

//pkt.pts = lTimeStamp * (__int64)frame_rate.den / 1000;

if( c->coded_frame && c->coded_frame->key_frame )

{

pkt.flags |= PKT_FLAG_KEY;

}

pkt.stream_index= m_pVideoStream->index;

pkt.data= m_pvideo_outbuf;

pkt.size= out_size;

ret = av_interleaved_write_frame( m_pAvFormatContext, &pkt );

}

else

{

ret = 0;

}

posted on 2012-09-17 11:09 楊粼波閱讀(2186) 評論(0) 編輯收藏引用所屬分類: C++ 、Windows

只有注冊用戶登錄后才能發表評論。
【推薦】100%開源！大型工業跨平臺軟件C++源碼提供，建模，組態！

相關文章: VS2015編譯Android版Cocos項目所踩的那些坑 linux使用msgpack及測試 msgpack[C++]使用筆記和 msgpack/cPickle性能對比 Twitter Snowflake 網游服務器中的GUID(唯一標識碼)實現-基于snowflake算法求最大公約數的3個實現字節對齊（強制對齊以及自然對齊）使用libcurl實現的上傳器窗口大小控制MINMAXINFO 對Windows下的File Mapping一個簡單的封裝

網站導航: 博客園 IT新聞 BlogJava 博問 Chat2DB 管理

青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

牽著老婆滿街逛

導航

統計

公告

常用鏈接

留言簿(11)

隨筆分類(466)

隨筆檔案(1513)

文章分類(46)

文章檔案(45)

相冊

收藏夾(39)

工具官網

技術網站

開源網站

其他窩點

收藏網站

銀行官網

友情鏈接

資源共享

搜索

積分與排名

最新評論

閱讀排行榜

用FFMPEG SDK進行視頻轉碼壓縮時解決音視頻不同步問題的方法