這兩天在閱讀電視轉發服務器中的流媒體底層庫的源碼時,在看到顯示部分的時候,遇到了一些疑問:
就是在用d3d做顯示時候,我們顯示的數據格式,指定為yv12,對於YV12的數據格式在內存中的分布,可以參考YV12的相關文章,這里我就暫時略過。
下面是將數據拷貝到顯示的鎖定內存中,用於顯示:
for(i = 0;i < h;i ++){//Y數據拷貝
memcpy(p + i * stride,item->output + i * w, w);
}
for(i = 0;i < h/2;i ++){//U數據拷貝
memcpy(p + stride * h + i * stride / 2,item->output + w * h + w * h / 4 + i * w / 2, w / 2);
}
for(i = 0;i < h/2;i ++){//V數據拷貝
memcpy(p + stride * h + stride * h / 4 + i * stride / 2,item->output + w * h + i * w / 2, w / 2);
}
而在顯示之前,也就是解碼的時候,也進行過數據的拷貝:
memcpy(&(pItemF.head),&(m_tRecentItem.head),sizeof(AV_HEAD_PARAM));
for (int i=0;i<m_tRecentItem.head.height;i++)//Y數據拷貝
memcpy(pYUVBuf+i*m_tRecentItem.head.width , m_tRecentItem.picture->data[0]+i*m_tRecentItem.picture ->linesize[0], m_tRecentItem.head.width);
for (int i=0;i<m_tRecentItem.head.height/2;i++)//U數據拷貝
memcpy(pYUVBuf+m_tRecentItem.head.height*m_tRecentItem.head.width+i*m_tRecentItem.head.width/2 , m_tRecentItem.picture->data[1]+i*m_tRecentItem.picture ->linesize[1], m_tRecentItem.head.width/2);
for (int i=0;i<m_tRecentItem.head.height/2;i++)//V數據拷貝
memcpy(pYUVBuf + m_tRecentItem.head.height*m_tRecentItem.head.width + m_tRecentItem.head.height/2 * m_tRecentItem.head.width/2 + i*m_tRecentItem.head.width/2 , m_tRecentItem.picture->data[2]+i*m_tRecentItem.picture ->linesize[2], m_tRecentItem.head.width/2);
而上面的item->output=pYUVBuf
如果顯示的數據是YV12,那么解碼以后的數據格式又是怎么樣的格式?
--------------------------------------------------------------
在經過一番查找資料以后知道,解碼以后的數據格式是I420.
在此博客中提過:http://blog.sina.com.cn/s/blog_4ae178ba01018o7q.html
解碼
如果您只要求解成YUV 420I數據,只需一次調用就可以了:
avcodec_decode_video(g_pCodecCtx, g_pavfFrame, (int *)&nGot, (unsigned __int8 *)pSrcData, dwDataLen);
這里,nGot用來返回解碼成功與否,avcodec_decode_video調用完成后,如果nGot不等於0,則表示解碼成功,否則未解出視頻幀。
pSrcData是待解的H264編碼的一段數據流,dwDataLen表示該段數據流的長度,單位是byte。
解 碼后的視頻幀(YUV數據)被存入g_pavfFrame,g_pavfFrame->data[0]、 g_pavfFrame->data[1]、g_pavfFrame->data[2]即是YUV數據。下面的示例代碼把YUV數據壓在了一 塊內存里,排列方式為:
YY
YY
U
V
該函數有返回值:如果解碼成功,則返回本次解碼使用的碼流字節數,否則返回0。
------------------------------------------------------------------------
在采集到RGB24數據后,需要對這個格式的數據進行第一次壓縮。即將圖像的顏色空間由RGB2YUV。因為,X264在進行編碼的時候需要標准的YUV(4:2:0)。但是這里需要注意的是,雖然YV12也是(4:2:0),但是YV12和I420的卻是不同的,在存儲空間上面有些區別。如下:
YV12 : 亮度(行×列) + V(行×列/4) + U(行×列/4)
I420 : 亮度(行×列) + U(行×列/4) + V(行×列/4)
可以看出,YV12和I420基本上是一樣的,就是UV的順序不同。
從上面這段話,我們可以知道,在做顯示的時候,因為i420的格式數據和yv12格式的數據uv存儲順序不一樣,所以我們在做顯示的時候,對數據進行了一次從新存儲。