Three.js使用WebRTC并应用着色器

Rob*_*bie 4 shader webgl three.js webrtc

我不知道如何将着色器应用于具有视频纹理的Three.js对象。

我一直在使用webRTC和three.js,并成功使用标准材质将视频纹理映射到网格上:

        var material    = new THREE.MeshBasicMaterial({
            color   : 0xffffff,
            map : videoTexture
        });
Run Code Online (Sandbox Code Playgroud)

我想通过向此纹理应用一个着色器(对于本示例为sobel着色器)来将其进一步发展。我的尝试在这里:http : //jsfiddle.net/xkpsE/1/

我收到一堆INVALID_OPERATION警告,但是在理解如何调试问题时遇到了麻烦。我也没有看到其他人这样做,所以我认为将这一知识公开是有益的:)

任何帮助,将不胜感激。

Wes*_*ley 5

你很亲近 它是:http : //jsfiddle.net/82fJh/1/。至少在OS X的Chrome上可以使用。

您有一些着色器制服格式错误,并且需要通过uv作为变化。

var sobelShader = {
    uniforms: {
        'texture': {
            type: 't',
            value: videoTexture
        },
         'width': {
            type: 'f',
            value: 320.0
        },
         'height': {
            type: 'f',
            value: 240.0
        }
    },
    vertexShader: [
        'varying vec2 vUv;',
        'void main() {',
           'vUv = uv;',
           'gl_Position = projectionMatrix * modelViewMatrix * vec4( position, 1.0 );',
        '}'
        ].join('\n'),
    fragmentShader: [
        'uniform sampler2D texture;',
        'uniform float width;',
        'uniform float height;',
        'varying vec2 vUv;',
        'void main(void) {',
            'float w = 1.0/width;',
            'float h = 1.0/height;',
            'vec2 texCoord = vUv;',
            'vec4 n[9];',
            'n[0] = texture2D(texture, texCoord + vec2( -w, -h));',
            'n[1] = texture2D(texture, texCoord + vec2(0.0, -h));',
            'n[2] = texture2D(texture, texCoord + vec2(  w, -h));',
            'n[3] = texture2D(texture, texCoord + vec2( -w, 0.0));',
            'n[4] = texture2D(texture, texCoord);',
            'n[5] = texture2D(texture, texCoord + vec2(  w, 0.0));',
            'n[6] = texture2D(texture, texCoord + vec2( -w, h));',
            'n[7] = texture2D(texture, texCoord + vec2(0.0, h));',
            'n[8] = texture2D(texture, texCoord + vec2(  w, h));',
            'vec4 sobel_horizEdge = n[2] + (2.0*n[5]) + n[8] - (n[0] + (2.0*n[3]) + n[6]);',
            'vec4 sobel_vertEdge  = n[0] + (2.0*n[1]) + n[2] - (n[6] + (2.0*n[7]) + n[8]);',
            'vec3 sobel = sqrt((sobel_horizEdge.rgb * sobel_horizEdge.rgb) + (sobel_vertEdge.rgb * sobel_vertEdge.rgb));',
            'gl_FragColor = vec4( sobel, 1.0 );',
        '}'
        ].join('\n')
}
Run Code Online (Sandbox Code Playgroud)

three.js r.53