2

我有 VS2010 运行带有 kniect 的 OpenCV 3.2.1。

我正在使用这里的教程

int main( int argc, char* argv[] ){

VideoCapture capture(CV_CAP_OPENNI); // or CV_CAP_OPENNI
for(;;)
{
    Mat depthMap;
    Mat bgrImage;

    capture.grab();

    capture.retrieve( depthMap, CV_CAP_OPENNI_DEPTH_MAP ); // Depth values in mm (CV_16UC1)
    capture.retrieve( bgrImage, CV_CAP_OPENNI_BGR_IMAGE );

    cout << "rows: " << depthMap.rows << " cols: " << depthMap.cols << endl;
    cout << "depth: " << depthMap.at<int>(0,0) << endl;

    imshow("RGB image", bgrImage);

    if( waitKey( 30 ) >= 0 )
        break;
}h
return 0;

运行代码后，我得到以下结果：

靠近墙壁约一米远：

rows: 480 cols: 640
depth: 1157
rows: 480 cols: 640
depth: 1157
rows: 480 cols: 640
depth: 1157
rows: 480 cols: 640
depth: 1157

（Kinect 对着墙，一米多远）

rows: 480 cols: 640
depth: 83690629
rows: 480 cols: 640
depth: 83690629
rows: 480 cols: 640
depth: 83690629
rows: 480 cols: 640
depth: 83690629
rows: 480 cols: 640
depth: 83690629

有人告诉我这些值实际上是两个像素？我真的不明白。

所以这是我到目前为止的理解：

我抓取了一个深度帧并将其存储在一个名为 depthMap 的矩阵中。矩阵的大小现在是 640*480。我正在使用代码 depthMap.at(0,0) 从第 0 行第 0 列中获取第一个深度值。但我没有返回毫米的结果，而是返回 83690629！这与我期望的最大值 10000 相差甚远

如何将这些值转换为毫米以便我可以使用它们？谢谢你

4

4 回答 4

1

深度图数据是单通道无符号 16 位。尝试替换int为CV_16UC1

于 2012-06-12T08:02:00.137 回答
1

我目前正在使用 kinect (+OpenNi + OpenCv)，我不知道你是否还在为你的问题而苦恼。

我尝试了完全相同的代码，但depthMap.at<unsigned short>(i,j)它工作得很好，给了我以毫米为单位的值（当我距离 kinect 50 厘米时为 502）

问题是：我不知道深度值是如何传递的，我在互联网上看到了很多相互矛盾的信息。为什么会是2像素？为什么要转换为十六进制？

我敢肯定，我不是那种难以理解这里的基本原则的人。那么，是否有人有一些关于 kinect 深度的可靠文档？

（我读过关于 stephane Magnenat/Nicolas Burrus 的公式：11 位上的 kinect 原始数据，添加一些几何材料等等……但是 OpenNi 是否已经处理了这个问题并提供了原样的深度？？）

随意发表评论。干杯。

于 2012-06-27T18:42:37.307 回答
1

深度值以 11 位存储，封装在 16 位变量中。因此，当您访问矩阵时，您必须提供正确的元素数据类型。如前所述，您可以使用depthMap.at<unsigned short>(i,j)，但必须确保unsigned short在所有编译器中都是 16 位长。我更喜欢使用uint16_t数据类型。

此外，根据您选择的openni PIXEL_FORMAT，存储在矩阵内的深度值可以是：

  • 以毫米为单位 - openni::PIXEL_FORMAT_DEPTH_1_MM
  • 十分之一毫米 - openni::PIXEL_FORMAT_DEPTH_100_UM

void openni::VideoMode::setPixelFormat(PixelFormat)您可以使用函数 http://www.openni.ru/wp-content/doxygen/html/classopenni_1_1_video_mode.html#af7fd37bba526fced9c7dbbbf1ab419ea设置pixel_format

如果您想要更精确的数据 ( PIXEL_FORMAT_DEPTH_100_UM) 以毫米为单位，您可以将其转换为浮点数并将其除以 10：

uint16_t redValue = depthMap.at<uint16_t>(i,j);
float myVal = ( (float) redValue ) / 10.0f;
于 2016-09-21T09:59:10.377 回答
0

check for the correct datatype, debug mode and then breakpoint having the matrix, then check the file datatype

于 2015-11-18T23:49:25.683 回答