Qt音視頻開發8-ffmpeg保存裸流

一、前言

最開始做的ffmpeg保存視頻文件，就是直接保存的裸流數據，裸流數據一般是H264格式的數據，這種數據文件可以用部分播放器播放，由於不是標准的格式，很多播放器其實不支持的，需要安裝對應的解碼器才行。后面發現安裝好K-Lite解碼器后，連系統自帶的播放器都可以正常播放H264視頻流文件，而且如果同步保存了同名文件的aac音頻文件放在同目錄下的話，聲音都能正常同步播放，可能這是播放器做的處理吧。

直接保存裸流基本上沒有什么難度，大致流程就是先打開文件，然后在循環解碼的地方直接將解碼好的數據write到文件即可，如果采用的是定時存儲的話，那就開個定時器，到了點就先關閉文件，然后重新打開新的名字的文件，這里要注意的是，rtmp視頻流的話，需要添加pps sps等信息，所以在每幀寫入文件前，要先用AVBitStreamFilter采用h264_mp4toannexb處理下才行。

二、功能特點

1. 多線程實時播放視頻流+本地視頻+USB攝像頭等。
2. 支持windows+linux+mac，支持ffmpeg3和ffmpeg4，支持32位和64位。
3. 多線程顯示圖像，不卡主界面。
4. 自動重連網絡攝像頭。
5. 可設置邊框大小即偏移量和邊框顏色。
6. 可設置是否繪制OSD標簽即標簽文本或圖片和標簽位置。
7. 可設置兩種OSD位置和風格。
8. 可設置是否保存到文件以及文件名。
9. 可直接拖曳文件到ffmpegwidget控件播放。
10. 支持h265視頻流+rtmp等常見視頻流。
11. 可暫停播放和繼續播放。
12. 支持存儲單個視頻文件和定時存儲視頻文件。
13. 自定義頂部懸浮條，發送單擊信號通知，可設置是否啟用。
14. 可設置畫面拉伸填充或者等比例填充。
15. 可設置解碼是速度優先、質量優先、均衡處理。
16. 可對視頻進行截圖（原始圖片）和截屏。
17. 錄像文件存儲支持裸流和MP4文件。
18. 支持qsv、dxva2、d3d11va等硬解碼。
19. 支持opengl繪制視頻數據，極低CPU占用。
20. 支持嵌入式linux，交叉編譯即可。

三、效果圖

四、相關站點

1. 國內站點：https://gitee.com/feiyangqingyun/QWidgetDemo
2. 國際站點：https://github.com/feiyangqingyun/QWidgetDemo
3. 個人主頁：https://blog.csdn.net/feiyangqingyun
4. 知乎主頁：https://www.zhihu.com/people/feiyangqingyun/
5. 體驗地址：https://blog.csdn.net/feiyangqingyun/article/details/97565652

五、核心代碼

void FFmpegThread::initSave()
{
    if (!saveFile) {
        return;
    }

    //如果存儲間隔大於0說明需要定時存儲
    if (saveInterval > 0) {
        QString dirName = QString("%1/%2").arg(savePath).arg(QDATE);
        newDir(dirName);
        fileName = QString("%1/%2_%3.mp4").arg(dirName).arg(fileFlag).arg(STRDATETIME);
        emit sig_startSave();
    }

    if (saveMp4) {
        saveVideoMp4(fileName);
    } else {
        saveVideoH264(fileName);
    }
}

void FFmpegThread::startSave()
{
    timerSave->start(saveInterval * 1000);
}

void FFmpegThread::stopSave()
{
    //停止存儲文件以及存儲定時器
    closeVideo();
    if (timerSave->isActive()) {
        timerSave->stop();
    }
}

void FFmpegThread::saveVideo()
{
    if (!saveFile) {
        return;
    }

    //重新設置文件名稱
    QString dirName = QString("%1/%2").arg(savePath).arg(QDATE);
    newDir(dirName);
    fileName = QString("%1/%2_%3.mp4").arg(dirName).arg(fileFlag).arg(STRDATETIME);

    if (saveMp4) {
        saveVideoMp4(fileName);
    } else {
        saveVideoH264(fileName);
    }
}

void FFmpegThread::closeVideo()
{
    if (!saveFile) {
        return;
    }

    if (saveMp4) {
        if (formatOut != NULL) {
            //寫入結束標識
            av_write_trailer(formatOut);
            avcodec_close(formatOut->streams[0]->codec);
            av_freep(&formatOut->streams[0]->codec);
            av_freep(&formatOut->streams[0]);
            avio_close(formatOut->pb);
            av_free(formatOut);
            initSaveOk = false;
            formatOut = NULL;
        }
    } else {
        if (fileVideo.isOpen()) {
            fileVideo.close();
        }

        if (fileAudio.isOpen()) {
            fileAudio.close();
        }
    }
}

void FFmpegThread::saveVideoH264(const QString &fileName)
{
    QMutexLocker locker(&mutex);
    closeVideo();
    if (videoStreamIndex >= 0) {
        fileVideo.setFileName(fileName);
        fileVideo.open(QFile::WriteOnly);
    }

    //存在音頻文件則同時保存音頻文件
    if (audioStreamIndex >= 0 && playAudio) {
        QString audioName = fileName;
        audioName = audioName.replace(QFileInfo(audioName).suffix(), "aac");
        fileAudio.setFileName(audioName);
        fileAudio.open(QFile::WriteOnly);
    }
}