視頻中包含的信息量要遠遠大於圖片,對視頻的處理分析也越來越成為計算機視覺的主流,而本質上視頻是由一幀幀的圖像組成,所以視頻處理最終還是要歸結於圖像處理,但在視頻處理中,有更多的時間維的信息可以利用。本文主要介紹OpenCV在處理視頻時的一些基本函數。
一、視頻幀的讀取
OpenCV為視頻的讀入提供了一個類VideoCapture,下面我們說明一下類的幾個重要的方法:
1,打開一段視頻或默認的攝像頭
有兩種方法,一種是在定義類的時候,一種是用open()方法。
VideoCapture capture("../video.avi"); // 方法1 capture.open("../video.avi"); // 方法2
如果把文件名換為設置ID,則可打開攝像頭,默認攝像頭為0。
2,獲取視頻幀
獲取視頻幀可以有多種方法
1 // 方法一 2 capture.read(frame); 3 // 方法二 4 capture.grab(); 5 capture.retrieve(frame); 6 // 方法三 7 capture>>frame;
3,獲取視頻的參數
一個視頻有很多參數,比如:幀率、總幀數、尺寸、格式等,VideoCapture的get方法可以獲取大量這些參數。
double rate=capture.get(CV_CAP_PROP_FPS); // 獲取 long nFrame=static_cast<long>(capture.get(CV_CAP_PROP_FRAME_COUNT)); // 獲取總幀數
更加相關的參數可以參考手冊。
4,設置視頻幀的讀取位置
VideoCapture類的set方法可以允許我們取出視頻中某個位置的幀,它有一些參數,可以按時間,也可以按幀號,還可以按視頻長短的比例。
1 // 第100幀 2 double position=100.0; 3 capture.set(CV_CAP_PROP_POS_FRAMES,position); 4 // 第1e6毫秒 5 double position=1e6; 6 capture.set(CV_CAP_PROP_POS_MSEC,position); 7 // 視頻1/2位置 8 double position=0.5; 9 capture.set(CV_CAP_PROP_POS_AVI_RATIO,position);
當然,set方法僅用於取視頻幀的位置,還可以設置視頻的幀率、亮度。
下面是一個將canny邊緣檢測應用於視頻的程序:
1 int main() 2 { 3 VideoCapture capture("../track.avi"); 4 if(!capture.isOpened()) 5 return 1; 6 double rate=capture.get(CV_CAP_PROP_FPS); 7 bool stop(false); 8 Mat frame; 9 10 namedWindow("Canny Video"); 11 int delay=1000/rate; 12 13 while(!stop) 14 { 15 if(!capture.read(frame)) 16 break; 17 Mat result; 18 Canny(frame,result,100,200); 19 threshold(result,result,128,255,THRESH_BINARY); 20 imshow("Canny Video",result); 21 22 if(waitKey(delay)>=0) 23 stop=true; 24 } 25 capture.release(); 26 }
二、視頻的寫入
視頻的寫入與讀取類似,OpenCV中是使用VideoWriter類來實現的,這個類有幾個方法,都很簡單。除了構造函數外,提供了open、IsOpen、write、和重載操作符<<
值得注意的是OpenCV里對視頻的編碼解碼等支持並不是很良好,所以不要希望用這個類去實現攝像頭圖像的獲取與轉碼,有興趣的可以參考FFmpeg庫。
1 VideoWriter::VideoWriter(const string& filename, int fourcc, 2 double fps, Size frameSize, bool isColor=true); 3 bool VideoWriter::open(const string& filename, int fourcc, 4 double fps, Size frameSize, bool isColor=true);
上面是類的構造函數與open方法,它們的參數相同,首先指定文件名,第二個參數是編碼格式,OpenCV里提供了很多種的編碼格式,如CV_FOURCC(‘P’,’I’,’M’,’1’)是MPEG-1格式,CV_FOURCC(‘M’,’G’,’P’,’G’)為motion-jpeg格式。
第三個參數為幀率,第4個參數為視頻的尺寸大小。
1 VideoCapture capture("../track.avi"); 2 double rate=capture.get(CV_CAP_PROP_FPS); 3 Size videoSize(capture.get(CV_CAP_PROP_FRAME_WIDTH), 4 capture.get(CV_CAP_PROP_FRAME_HEIGHT)); 5 VideoWriter writer; 6 writer.open("../result.avi",CV_FOURCC('P','I','M','1'),rate, 7 videoSize); 8 Mat frame; 9 capture>>frame; 10 writer<<frame;