Kinect for Windows V2和V1對比開發___彩色資料擷取

標籤：kinect

V1彩色解析度：640x480

V2彩色解析度：1920x1080

1，開啟彩色映像幀的方式

對於V1: 使用NuiImageStreamOpen方法開啟

hr = m_PNuiSensor->NuiImageStreamOpen(                                   NUI_IMAGE_TYPE_COLOR,NUI_IMAGE_RESOLUTION_640x480,0, 2,                                   m_hNextColorFrameEvent,&m_hColorStreamHandle);                          if( FAILED( hr ) )                          {                                   cout<<"Could notopen image stream video"<<endl;                                   return hr;                    }這種方式可以設定解析度

對於V2：     

首先使用  m_pKinectSensor->Open();//開啟Kinect         if (SUCCEEDED(hr))        {            hr =m_pKinectSensor->get_ColorFrameSource(&pColorFrameSource);        }方法get_ColorFrameSource開啟彩色幀的源。然後使用     if (SUCCEEDED(hr))        {            hr =pColorFrameSource->OpenReader(&m_pColorFrameReader);        }        SafeRelease(pColorFrameSource);方法OpenReader開啟彩色幀讀取器。

2，更新彩色幀的方式

對於V1：使用NuiImageStreamGetNextFrame方法

NuiImageStreamGetNextFrame(m_hColorStreamHandle,0, &pImageFrame);//得到該幀資料

對於V2：使用AcquireLatestFrame方法

   

 if (!m_pColorFrameReader)    {        return;    }     IColorFrame* pColorFrame = NULL; HRESULT hr =m_pColorFrameReader->AcquireLatestFrame(&pColorFrame);

3，資料的處理方式

對於V1：這種資料擷取方式比較明朗看到資料內部結構，

INuiFrameTexture *pTexture =pImageFrame->pFrameTexture;                          NUI_LOCKED_RECT LockedRect;                          pTexture->LockRect(0, &LockedRect,NULL, 0);//提取資料幀到LockedRect，它包括兩個資料對象：pitch每行位元組數，pBits第一個位元組地址                          if( LockedRect.Pitch != 0 )                          {                                   cvZero(colorImage);                                   for (int i=0; i<480; i++)                                   {                                            uchar* ptr =(uchar*)(colorImage->imageData+i*colorImage->widthStep);                                            BYTE * pBuffer =(BYTE*)(LockedRect.pBits)+i*LockedRect.Pitch;//每個位元組代表一個顏色資訊，直接使用BYTE                                            for (int j=0; j<640; j++)                                            {                                                     ptr[3*j] =pBuffer[4*j];//內部資料是4個位元組，0-1-2是BGR，第4個現在未使用                                                     ptr[3*j+1] =pBuffer[4*j+1];                                                     ptr[3*j+2] =pBuffer[4*j+2];                                            }                                   }                                   //cvWriteFrame(wr_color,colorImage);                                   cvShowImage("colorImage", colorImage);//顯示映像

得到的最終形式可以用OpenCV顯示。

 

對於V2：   這種資料的內部結構是神馬樣子呢？然後如何用OpenCV顯示出映像資料呢？待查…

    

RGBQUAD* m_pColorRGBX;//彩色資料存放區位置m_pColorRGBX(NULL)//建構函式初始化    // create heap storage for color pixel data in RGBXformat    m_pColorRGBX = new RGBQUAD[cColorWidth *cColorHeight];  //下邊就是AcquireLatestFrame之後處理資料 INT64 nTime = 0;        IFrameDescription* pFrameDescription =NULL;        int nWidth = 0;        int nHeight = 0;        ColorImageFormat imageFormat = ColorImageFormat_None;        UINT nBufferSize = 0;        RGBQUAD *pBuffer = NULL;         if (SUCCEEDED(hr))        {            if (imageFormat == ColorImageFormat_Bgra)            {                hr =pColorFrame->AccessRawUnderlyingBuffer(&nBufferSize, reinterpret_cast<BYTE**>(&pBuffer));            }            else if (m_pColorRGBX)            {                pBuffer = m_pColorRGBX;                nBufferSize = cColorWidth *cColorHeight * sizeof(RGBQUAD);                hr = pColorFrame->CopyConvertedFrameDataToArray(nBufferSize,reinterpret_cast<BYTE*>(pBuffer), ColorImageFormat_Bgra);                       }            else            {                hr = E_FAIL;            }        }        if (SUCCEEDED(hr))        {            ProcessColor(nTime, pBuffer,nWidth, nHeight);        }

感覺目前得到的pBuffer就是儲存的彩色資料，問題是如何用OpenCV來顯示呢？

Kinect for Windows V2和V1對比開發___彩色資料擷取