8

我正在尝试使用 OpenCV 从网络摄像头抓取帧并使用 SFML 在窗口中显示它们。

VideoCapture 以 OpenCV 的 Mat 格式返回帧。为了显示帧，SFML 需要 uint8 格式的一维像素数组，（据我所知）可以与 uchar 互换。该数组预计代表每像素 RGBA 32 位。

所以，我有一个 uchar 数组，我正在循环 Mat 数据并复制每个像素：

VideoCapture cap(0);
Mat frame;
cap >> frame;

uchar* camData = new uchar[640*480*4];
uchar* pixelPtr = frame.data;
for(int i = 0; i < frame.rows; i++)
{
    for(int j = 0; j < frame.cols; j++)
    {
        camData[i*frame.cols + j + 2] = pixelPtr[i*frame.cols + j + 0]; // B
        camData[i*frame.cols + j + 1] = pixelPtr[i*frame.cols + j + 1]; // G
        camData[i*frame.cols + j + 0] = pixelPtr[i*frame.cols + j + 2]; // R
        camData[i*frame.cols + j + 3] = 255;

    }
}
img.LoadFromPixels(640, 480, camData); //Load pixels into SFML Image object for display

不幸的是，这并不完全奏效。该循环中的某些内容是错误的，因为当我加载和显示 camData 时生成的图像被打乱了。

据我所知，要么我在循环中的数学是错误的，所以像素被分配错误，或者 Mat 数据的格式不是 BGR。

有任何想法吗？

4

3 回答 3

13

OpenCV 可以为您完成所有工作：

VideoCapture cap(0);
Mat frame;
cap >> frame;

uchar* camData = new uchar[frame.total()*4];
Mat continuousRGBA(frame.size(), CV_8UC4, camData);
cv::cvtColor(frame, continuousRGBA, CV_BGR2RGBA, 4);
img.LoadFromPixels(frame.cols, frame.rows, camData);
于 2012-04-22T09:38:32.267 回答
3

我更喜欢接受的答案，但这个片段可以帮助您了解正在发生的事情。

 for (int i=0; i<srcMat.rows; i++) {
            for (int j=0; j<srcMat.cols; j++) {
                int index = (i*srcMat.cols+j)*4;
                // copy while converting to RGBA order
                dstRBBA[index + 0] = srcMat[index + 2 ];
                dstRBBA[index + 1] = srcMat[index + 1 ];
                dstRBBA[index + 2] = srcMat[index + 0 ];
                dstRBBA[index + 3] = srcMat[index + 3 ];
            }
        }
于 2017-01-20T07:23:49.607 回答
1

对我来说，以下代码工作：

VideoCapture capture(0);
Mat mat_frame;
capture >> mat_frame; // get a new frame from camera            

// Be sure that we are dealing with RGB colorspace...
Mat rgbFrame(width, height, CV_8UC3);
cvtColor(mat_frame, rgbFrame, CV_BGR2RGB);

// ...now let it convert it to RGBA
Mat newSrc = Mat(rgbFrame.rows, rgbFrame.cols, CV_8UC4);
int from_to[] = { 0,0, 1,1, 2,2, 3,3 };
mixChannels(&rgbFrame, 2, &newSrc, 1, from_to, 4);

结果（newSrc）是一个预乘图像！

于 2015-02-09T14:06:26.543 回答