我创建了一个将视频帧(在 Mac 上)渲染到自定义帧缓冲区对象的类。作为输入,我有一个 YUV 纹理,并且我成功创建了一个片段着色器,它将 3 个矩形纹理作为输入(每个用于 Y、U 和 V 平面,其数据由 glTexSubImage2D 使用 GL_TEXTURE_RECTANGLE_ARB、GL_LUMINANCE 和 GL_UNSIGNED_BYTE 上传) ,在渲染之前,我将活动纹理设置为三个不同的纹理单元(0、1 和 2)并为每个纹理绑定一个纹理,出于性能原因,我使用了 GL_APPLE_client_storage 和 GL_APPLE_texture_range。然后我使用 glUseProgram(myProg)、glBegin(GL_QUADS) ... glEnd() 渲染它。
效果很好,我得到了预期的结果(除了闪烁效果,我猜这与我在两个不同的线程上使用了两个不同的 GL 上下文有关,我想它们在某些时候会互相影响[这是稍后另一个问题的主题])。无论如何,我决定通过添加顶点着色器来进一步改进我的代码,这样我就可以跳过 glBegin/glEnd - 我读到的已经过时了,无论如何都应该避免。
因此,下一步我创建了两个缓冲区对象,一个用于顶点,一个用于纹理坐标:
const GLsizeiptr posSize = 4 * 4 * sizeof(GLfloat);
const GLfloat posData[] =
{
-1.0f, -1.0f, -1.0f, 1.0f,
1.0f, -1.0f, -1.0f, 1.0f,
1.0f, 1.0f, -1.0f, 1.0f,
-1.0f, 1.0f, -1.0f, 1.0f
};
const GLsizeiptr texCoordSize = 4 * 2 * sizeof(GLfloat);
const GLfloat texCoordData[] =
{
0.0, 0.0,
1.0, 0.0,
1.0, 1.0,
0.0, 1.0
};
glGenBuffers(1, &m_vertexBuffer);
glBindBuffer(GL_ARRAY_BUFFER, m_vertexBuffer);
glBufferData(GL_ARRAY_BUFFER, posSize, posData, GL_STATIC_DRAW);
glGenBuffers(1, &m_texCoordBuffer);
glBindBuffer(GL_ARRAY_BUFFER, m_texCoordBuffer);
glBufferData(GL_ARRAY_BUFFER, texCoordSize, texCoordData, GL_STATIC_DRAW);
然后在加载着色器后,我尝试检索顶点着色器中属性的位置:
m_attributeTexCoord = glGetAttribLocation( m_shaderProgram, "texCoord");
m_attributePos = glGetAttribLocation( m_shaderProgram, "position");
这给了我 0 的 texCoord 和 1 的位置,这似乎很好。
得到属性后我也调用
glEnableVertexAttribArray(m_attributePos);
glEnableVertexAttribArray(m_attributeTexCoord);
(我只做一次,还是必须在每个 glVertexAttribPointer 和 glDrawArrays 之前完成?是否需要每个纹理单元完成?或者当我的着色器被 glProgram 激活时?或者我可以在任何地方做吗?)
之后我更改了渲染代码以替换 glBegin/glEnd:
glActiveTexture(GL_TEXTURE0);
glBindTexture(GL_TEXTURE_RECTANGLE_ARB, texID_Y);
glActiveTexture(GL_TEXTURE1);
glBindTexture(GL_TEXTURE_RECTANGLE_ARB, texID_U);
glActiveTexture(GL_TEXTURE2);
glBindTexture(GL_TEXTURE_RECTANGLE_ARB, texID_V);
glUseProgram(myShaderProgID);
// new method with shaders and buffers
glBindBuffer(GL_ARRAY_BUFFER, m_vertexBuffer);
glVertexAttribPointer(m_attributePos, 4, GL_FLOAT, GL_FALSE, 0, NULL);
glBindBuffer(GL_ARRAY_BUFFER, m_texCoordBuffer);
glVertexAttribPointer(m_attributeTexCoord, 2, GL_FLOAT, GL_FALSE, 0, NULL);
glDrawArrays(GL_QUADS, 0, 4);
glUseProgram(0);
但是自从将代码更改为此,我总是只会得到黑屏。所以我想我错过了一些简单的步骤,也许是一些 glEnable/glDisable 或正确设置一些东西 - 但就像我说我是新手,所以我真的不知道。供您参考,这里是顶点着色器:
#version 110
attribute vec2 texCoord;
attribute vec4 position;
// the tex coords for the fragment shader
varying vec2 texCoordY;
varying vec2 texCoordUV;
//the shader entry point is the main method
void main()
{
texCoordY = texCoord;
texCoordUV = texCoordY * 0.5; // U and V are only half the size of Y texture
gl_Position = gl_ModelViewProjectionMatrix * position;
}
我的猜测是我在这里遗漏了一些明显的东西,或者只是对这里正在进行的过程还没有足够深入的了解。我也尝试使用 OpenGLShaderBuilder,它帮助我获得了正确的片段着色器的原始代码(这就是我没有在这里发布它的原因),但是由于添加了顶点着色器,它也没有给我任何输出(想知道如果它不知道 position/texCoord 属性,它怎么知道如何产生输出?)