5

我需要为 OpenGL 帧获取一个 CMSampleBuffer。我正在使用这个:

int s = 1;
        UIScreen * screen = [UIScreen mainScreen];
        if ([screen respondsToSelector:@selector(scale)]){
            s = (int)[screen scale];
        }
        const int w = viewController.view.frame.size.width/2;
        const int h = viewController.view.frame.size.height/2;
        const NSInteger my_data_length = 4*w*h*s*s;
        // allocate array and read pixels into it.
        GLubyte * buffer = malloc(my_data_length);
        glReadPixels(0, 0, w*s, h*s, GL_RGBA, GL_UNSIGNED_BYTE, buffer);
        // gl renders "upside down" so swap top to bottom into new array.
        GLubyte * buffer2 = malloc(my_data_length);
        for(int y = 0; y < h*s; y++){
            memcpy(buffer2 + (h*s - 1 - y)*4*w*s, buffer + (4*y*w*s), 4*w*s);
        }
        free(buffer);
        CMBlockBufferRef * cm_block_buffer_ref;
        CMBlockBufferAccessDataBytes(cm_block_buffer_ref,0,my_data_length,buffer2,*buffer2);
        CMSampleBufferRef * cm_buffer;
        CMSampleBufferCreate (kCFAllocatorDefault,cm_block_buffer_ref,true,NULL,NULL,NULL,1,1,NULL,0,NULL,cm_buffer);

我得到 CMSampleBufferCreate 的 EXEC_BAD_ACCESS。

任何帮助表示赞赏,谢谢。

4

3 回答 3

6

解决方案是使用 AVAssetWriterInputPixelBufferAdaptor 类。

int s = 1;
        UIScreen * screen = [UIScreen mainScreen];
        if ([screen respondsToSelector:@selector(scale)]){
            s = (int)[screen scale];
        }
        const int w = viewController.view.frame.size.width/2;
        const int h = viewController.view.frame.size.height/2;
        const NSInteger my_data_length = 4*w*h*s*s;
        // allocate array and read pixels into it.
        GLubyte * buffer = malloc(my_data_length);
        glReadPixels(0, 0, w*s, h*s, GL_RGBA, GL_UNSIGNED_BYTE, buffer);
        // gl renders "upside down" so swap top to bottom into new array.
        GLubyte * buffer2 = malloc(my_data_length);
        for(int y = 0; y < h*s; y++){
            memcpy(buffer2 + (h*s - 1 - y)*4*w*s, buffer + (4*y*w*s), 4*w*s);
        }
        free(buffer);
        CVPixelBufferRef pixel_buffer = NULL;
        CVPixelBufferCreateWithBytes (NULL,w*2,h*2,kCVPixelFormatType_32BGRA,buffer2,4*w*s,NULL,0,NULL,&pixel_buffer);
        [av_adaptor appendPixelBuffer: pixel_buffer withPresentationTime:CMTimeMakeWithSeconds([[NSDate date] timeIntervalSinceDate: start_time],30)];
于 2011-01-28T18:14:18.903 回答
1

为什么CMSampleBufferCreate()代码中的第三个参数为 true?根据文档

参数

分配器

用于为 CMSampleBuffer 对象分配内存的分配器。传递 kCFAllocatorDefault 以使用当前的默认分配器。

数据缓冲区

这可以是 NULL,没有后备内存的 CMBlockBuffer,有后备内存但还没有数据的 CMBlockBuffer,或者已经包含媒体数据的 CMBlockBuffer。只有在最后一种情况下(或者如果 NULL 和 numSamples 为 0),dataReady 才应该为真。

数据就绪

指示 dataBuffer 是否已经包含媒体数据。

cm_block_buffer_ref作为缓冲区传入的内容不包含任何数据(为了安全起见,您应该将其设为 NULL,我不相信编译器默认情况下会这样做),因此您应该false在此处使用。

这可能还有其他问题,但这是第一个让我跳出来的项目。

于 2011-01-28T14:13:00.683 回答
0

为什么使用双 malloc 以及为什么不通过临时缓冲区就地交换?

像这样的东西:

    GLubyte * raw = (GLubyte *) wyMalloc(size);
    LOGD("raw address %p", raw);
    glReadPixels(x, y, w, h, GL_RGBA, GL_UNSIGNED_BYTE, raw);
    const size_t end = h/2;
    const size_t W = 4*w;
    GLubyte row[4*w];
    for (int i=0; i <= end; i++) {
        void * top = raw + (h - i - 1)*W;
        void * bottom = raw + i*W;
        memcpy(row, top, W);
        memcpy(top, bottom, W);
        memcpy(bottom, row, W);
    }
于 2012-10-03T03:30:13.157 回答