RTSP協議轉換RTMP直播協議
RTSP協議也是廣泛使用的直播/點播流媒體協議,以前的項目里實現了一個RTSP協議轉換RTMP直播協議的程序,為的是可以接收遠端設備或服務器的多路RTSP直播數據,實時轉換為RTMP直播協議,推送到NginxRtmp等RTMP服務器,可以在PC上實現flash觀看RTSP直播源(比如IPCAM)的需求,也能通過Nginx的HLS協議轉換,在手機上觀看。實現的思路分享如下。
要點分析
首先,程序的主要目的,是從多路RTSP輸入源中提取AAC編碼的音頻和H.264編碼視頻數據,並生成RTMP數據包,然后組裝RTMP推送協議,並發往RTMP服務器。在發送的過程中,要求可以從RTSP數據源切換到具有相同h.264和aac編碼的FLV文件中,並不影響RTMP直播。因此,本程序的關鍵點有以下部分:
- RTSP直播流的讀取
- H.264和AAC編碼數據的分析、處理
- FLV文件數據的提取及與RTSP直接的切換和銜接
- RTMP數據包封裝
- RTMP推送協議
有了關鍵點,就可以一項一項的去分析。
設計思路
根據上面分析的要點,首先要選擇RTSP直播協議的讀取。我們不需要從零做起,網絡上有很多和RTSP相關的開源項目可以使用或借鑒,我選擇了Live555。(后來我也做了通過ffmpeg接口來讀取RTSP數據的項目,也很不錯,各有優缺點)
Live555是一個跨平台的流媒體解決方案,主要支持RTSP協議,好像也支持SIP(這個也是我馬上研究的重點,之后會寫文章研究SIP相關的技術實現)。Live555實現了RTSP包括服務器-客戶端的整套結構,是很知名的一個開源項目。網上有很多關於Live555學習和使用的文章,我就不具體介紹了。
H.264和AAC數據的分析處理,這個對於從沒做過相關項目開發的人來說,應該是一個難點,主要是相關概念的理解。好在我一直在做這塊,也比較好弄。
第4和第5點,可以參照我之前的文章“RTMP協議發送H.264編碼及AAC編碼的音視頻,實現攝像頭直播”的技術方法,來加以實現。因此,主要需要處理的就是RTSP直播流數據的獲取,以及對其中H.264和AAC編碼數據的處理。
於是可以畫出大體結構如下:
邏輯與實現
1. 程序框架和模塊說明
2. 主要接口
RtspCapture是我的程序里管理RTSP直播數據流和分析處理的類,接口很重要,基本上這個設計就可以。(當然,全部代碼是不會放上來的,有興趣的可以和我談,這里只羅列關鍵的地方。)
他所使用的live555變量,這里ourRTSPClient實際就是RTSPClient的簡單繼承
3.RtspCapture調用live555的主要流程
1. 首先,在RtspCapture構造函數初始化
2. 在StartRtsp函數中,創建RtspClient,並發送"describe"命令,開始獲取sdp。回調函數就是continueAfterDESCRIBE。在這里創建MediaSession,之后再發送"setup"命令,等,這些都可以在live555的例子以及網上的說明中看到。
3. 還有一個關鍵點,就是要在自己的線程循環中,調用live555 environment的事件循環,就像這樣
4. 對rtsp回調h264數據的分析處理
這里演示了,如何從rtsp回調的h264數據中,提取sps和pps信息。里面的parse函數,是live555自帶的。
調用方式
+++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++
haibindev.cnblogs.com,合作請聯系QQ。(轉載請注明作者和出處~)
+++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++