Escribir datos de textura en la memoria intermedia de profundidad

Question

Estoy tratando de implementar la técnica descrita en: Compositing Images with Depth.

La idea es utilizar una textura existente (cargada desde una imagen) como máscara de profundidad, para simular básicamente 3D.

El problema al que me enfrento es que glDrawPixels no está disponible en OpenGLES. ¿Hay alguna manera de lograr lo mismo en el iPhone?

Answer 1

El búfer de profundidad está más oscurecido de lo que cree en OpenGL ES; no solo glDrawPixels está ausente, sino que gl_FragDepth se ha eliminado de GLSL. Por lo tanto, no puede escribir un sombreador de fragmentos personalizado para transferir valores al búfer de profundidad, ya que puede presionar colores.

La solución más obvia es empacar su información de profundidad en una textura y usar un sombreador de fragmentos personalizado que hace una comparación en profundidad entre el fragmento que genera y uno que mira desde una textura que proporciona. Solo si el fragmento generado está más cerca, puede continuar. El búfer de profundidad normal detectará otros casos de oclusión y, en principio, podría usar un objeto framebuffer para crear la textura de profundidad en primer lugar, ofreciéndole un viaje completo en la GPU, aunque no es directamente relevante para su problema.

Las desventajas son que el dibujo le costará una unidad de textura extra y las texturas usan componentes enteros.

EDITAR: con el fin de mantener el ejemplo simple, suponga que estaba empaquetando toda su información de profundidad en el canal rojo de una textura. Que le daría un buffer muy baja profundidad precisión, pero sólo para mantener las cosas claras, se podría escribir un fragment shader rápida como:

void main() 
{ 
    // write a value to the depth map 
    gl_FragColor = vec4(gl_FragCoord.w, 0.0, 0.0, 1.0); 
} 

Para tienda de profundidad en el canal rojo. Por lo tanto, ha recreado parcialmente la antigua extensión de textura de profundidad: tendrá una imagen con un rojo más brillante en píxeles que están más cerca, un rojo más oscuro en píxeles que están más alejados. Creo que en tu pregunta, realmente cargarías esta imagen desde el disco.

Para utilizar entonces la textura en un futuro fragment shader, que haría algo como:

uniform sampler2D depthMap; 

void main() 
{ 
    // read a value from the depth map 
    lowp vec3 colourFromDepthMap = texture2D(depthMap, gl_FragCoord.xy); 

    // discard the current fragment if it is less close than the stored value 
    if(colourFromDepthMap.r > gl_FragCoord.w) discard; 

    ... set gl_FragColor appropriately otherwise ... 
} 

Edit2: se puede ver un mapeo mucho más inteligente de profundidad a un valor RGBA here. Para enlazar directamente a ese documento, OES_depth_texture definitivamente no es compatible con el iPad o con el iPhone de tercera generación. No he realizado una prueba completa en otro lugar.