Learning the WebGL

\color{blue}{ch2}

坐标图

canvas1.png

canvas的坐标横轴为x轴(正方向朝右),纵轴为y轴(正方向朝下)

canvas3.png

webgl的右手坐标

canvas4.png

对应坐标

绘图简单步骤

canvas2.png
  1. 获取canvas: var canvas = doucment.getElementById('webgl')
  2. 获取上下文: var gl = getWebGLContext(canvas)
  3. 初始化着色器 initShader(gl, VSHADER_SOURCE, FSHADER_SOURCE)
  4. 设置背景色: gl.clearColor(0.0, 0.0, 0.0, 1.0)
  5. 清空canvas: gl.clear(gl.COLOR_BUFFER_BIT)
  6. 绘图: gl.drawArrays(gl.POINTS, 0, 1)

使用变量

  1. 声明: attribute vec4 a_Position;\n
  2. 将变量赋值给gl_Position: gl_Position = a_Position;\n
  3. 向变量传输数据:

var a_Position = gl.getAttribLocation(gl.program, 'a_Position')
gl.vertexAttrib3f(a_Position, 0.0, 0.0, 0.0)

要点

  1. WebGL程序包括运行在浏览器中的Javascript和运行在WebGL系统的着色器程序俩个部分
  2. vec4 四个浮点数 组成的矢量(也称为齐次坐标是四维的,通常把最后一个变量设置为1.0代表三维)
  3. 顶点着色器两个内置变量: gl_Position, gl_PointSize
  4. 片元着色器内置变量: gl_FragColor
  5. attribute变量: 传输与顶点相关的数据, unifrom变量传输对所有顶点相同的数据(或与顶点无关)

\color{blue}{ch3}

绘制多点(使用缓冲区)

  1. 创建缓冲区对象: var vertexBuffer = gl.creteBuffer()
  2. 绑定缓冲区对象: gl.bindBuffer(gl.ARRAY_BUFFER, vextexBuffer)
  3. 将数据写入缓冲区: gl.bufferData(gl.ARRAY_BUFFER, vertices, gl.STATIC_DRAW)
  4. 将缓冲区对象分配给一个attribute变量(多点一次性分配)): gl.vertexAttribPointer(a_Position, 2, gl.FLOAT, false, 0, 0)
  5. 开启attribute变量(为了使顶点着色器能够访问缓冲区数据): gl.enableVertexAttribArray(a_Position)

要点

  1. new Float32Array([])类型化数组: BYTES_PER_ELEMENT 数组中每个元素所占的字节数

WebGl绘制基本图形

gl.drawArrays(gl.TRIANGLES, 0, n)

canvas5.png

\color{blue}{ch4}

变换矩阵步骤

  1. 为旋转矩阵创建Matrix对象: var xformMatrix = new Matrix4()
  2. 将xformMatrix设置为旋转矩阵: xformMatrix.setRotate(ANGLE, 0, 0, 1)
  3. 将旋转矩阵传输给顶点着色器: gl.uniformMatrix4fv(u_xformMatrix, false, xformMatrix.elements)
  4. varying变量的作用是从顶点着色器向片元着色器传输数据

要点

  1. gl.uniformMatrix4fv()的最后一个参数一定要是类型化数组
  2. 将变换全部复合在一起的矩阵称为模型矩阵
  3. 当有多种数据传输时,可以使用多个缓冲区存不同数据或者使用一个缓冲区进行数据的交错组织

一个缓冲区处理多种数据

canvas6.png

传输颜色

varying vec4 v_Color;\n +
.......
v_Color = a_Color;\n+
.......
gl_FragColor = v_Color;\n+

调用片元着色器

片元着色器计算出该片元的颜色,并写入颜色缓冲区,直到第15部最后一个片元被处理完成,浏览器就会显示处最终的结果

canvas7.png

\color{blue}{ch6}

要点

  1. vec4 v4 = vec4(1.0, 2.0, 3.0, 0.0) 可以通过v4.x, v4.y, v4.z访问
  2. 存储限定字Attribute变量: 只能出现在顶点着色器中,“逐顶点”
  3. uniform变量: 逐片元或顶点共用
  4. varying: 从顶点着色器向片元着色器传输数据, 但变量一定是同名和同类型的varying变量

\color{blue}{ch7}

视图矩阵

视图矩阵表示观察者的状态:观察者的视点,观察点,上方向

canvas8.png

视图矩阵步骤

  1. uniform mat4 u_ViewMatrix;\n 用来接收视图矩阵
    .......
  2. gl_Position = u_ViewMatrix * a_Position;\n 视图矩阵与顶点坐标相乘
    .......
  3. var u_ViewMatrix = gl.getUniformLocation(gl.program, 'u_ViewMatrix) 获取存储位置
  4. var viewMatrix = new Matrix4()
  5. viewMatrix.setLookAt(0.20, 0.25, 0.25, 0, 0, 0, 0, 1, 0) 设置视点,视线和上方向
  6. gl.uniformMatrix4fv(u_ViewMatrix, false, viewMatrix.elements) 传输

要点

  1. 将平移,缩放等基本变换矩阵或它们的组合称为模型矩阵
  2. <视图矩阵> x <模型矩阵> x <原始顶点坐标>
  3. 也可以将视图矩阵和模型矩阵相乘的结果成为模型视图矩阵: var modelViewMatrix = viewMatrix.multiply(modelMatrix)
  4. <投影矩阵> x <视图矩阵> x <模型矩阵>称为模型视图投影矩阵

鼠标或键盘控制思路

  1. 在main()里注册事件, 参数有:事件, gl, 顶点数, 视图矩阵储存位置, 视图矩阵document.onkeydown = function(ev){keydown(ev, gl, n, u_ViewMatrix)}
  2. 在main()里画初始的(还没调用keydown函数): draw(gl, n, u_ViewMatrix, viewMatrix)
  3. 在keydown改变viewMatrix.setLookAt()参数, 最后调用draw画图
  4. 执行draw:传递viewMatrix, gl.drawArrays(gl.TRIANGLES, 0, n)

可视空间

  1. 盒子空间, 由正射投影产生: 大小与其所在的位置没有关系(不能产生深度感), 用到的矩阵是 正射投影矩阵(OrthoView)
canvas9.png
canvas10.png
canvas11.png
  1. 金字塔可视空间, 由透视投影产生: 一般真实的世界用的都是透视投影, 用到矩阵是 透视投影矩阵(projMatrix)
canvas12.png
canvas13.png
canvas14.png

处理对象的前后关系

  1. WebGL会按照缓冲区的顺序绘制图形,而且后绘制的图形覆盖先绘制图形
  2. 可以利用WebGL提供的隐藏面消除功能消除
  3. 步骤:

开启隐藏面消除功能 gl.enable(gl.DEPTH_TEST)
在绘制之前,清除深度缓冲区 gl.clear(gl.DEPTH_BUFFER_BIT)

  1. 深度缓冲区就是用来存储深度信息的,所以在绘制一帧之前,都必须清除缓冲区(包括颜色和深度): gl.clear(gl.COLOR_BUFFER_BIT | gl.DEPTH_BUFFER_BIT)

画3D图使用索引

  1. 使用gl.drawElements()代替gl.drawArrays()
  2. 上面两种方法的区别在于gl.ELEMENT_ARRSY_BUFFERT它管理着具有索引结构的三维模型数据
    canvas15.png
  3. 索引值是整型数,使用Uint8Array


    canvas16.png
  4. 当多次调用缓冲区时,可以把缓冲区封装成一个函数,initArrayBuffer(gl, data, num, type, attribute)

其中data为顶点或者颜色坐标,type表示坐标的类型, attribute代表变量名, num代表每个顶点的占位数

\color{blue}{ch8}

反射类型

  1. 漫反射(diffuse)

<漫反射光颜色> = <入射光颜色> x <表面基底色> x cosa

  1. 环境反射(ambient)

<环境反射光颜色> = <入射光颜色> x <表面基底色>

物体最终颜色

<表面的反射光颜色> = <漫反射光颜色> + <环境反射光颜色>

平行光下的漫反射

  1. 入射角cosa = <光线方向> · <法线方向>,两者的点积,两个向量进行归一化
  2. 平面上任意一点都具有相同的法向量, 所以顶点坐标个数顶点颜色个数法线量个数要保持一致
  3. 归一化(normalize)光线以Float32Array类型的形式储存在lightDirection对象的elements属性中

运动物体光照

  1. 对顶点坐标进行变换的模型矩阵

变换后的法向量: 用法向量乘以模型矩阵的逆转矩阵\color{green}{modelMatrix}

求逆转置步骤:

  1. 求原矩阵的逆矩阵 normalMatrix.setInverseOf(modelMatrix)
  2. 将上一步的求得的逆矩阵进行转置normalMatrix.transpose()
    这里的用normalMatrix来存储

点光源的漫反射

  1. 在物体不同位置(不同顶点)的入射光的方向不同
  2. 计算顶点的入射光的方向步骤:
  1. 计算模型变换后的顶点坐标(世界坐标)var vertexPosition = u_ModelMatrix * a_Position
  2. 光线方向是由点光源坐标减去顶点坐标,在进行归一化 vec3 lightDirecti on = normalize(u_LightPosition - vec3(vertexPosition))

要点

  1. 为了更逼真:逐片元光照

\color{blue}{ch9}

要点

  1. 模型矩阵(\color{red}{modelMatrix}): 变换原始顶点坐标(旋转,平移,缩放)
  2. 视图矩阵(\color{red}{viewMatrix}): 观察者状态lookAt
  3. 投影矩阵(\color{red}{projMatrix}): 可视空间包括setPerspective, setOrtho
  4. 一组顶点多次复用时,平移和旋转都有类似的光标概念

层次结构模型

  1. 例:单关节模型
  1. 初始化顶点坐标和颜色缓冲区n = initVertexBuffer(gl)
  2. 注册键盘事件,参数:ev, gl, n(顶点索引数组个数), viewProjMatrix(投影矩阵) , u_MvpMatrix(投影视图模型矩阵), uNormalMatrix
  3. 触发键盘事件, 改变全局变量g_arm1Angleg_joint1Angle, 从而改变全局模型矩阵g_modelMatrix, 多次调用
  4. 重新计算视图投影模型矩阵 viewProjMatrix
  1. 例: 多关节模型
  1. 初始化顶点坐标和颜色缓冲区n = initVertexBuffer(gl)
  2. 注册键盘事件,参数:ev, gl, n(顶点索引数组个数), viewProjMatrix(投影矩阵) , u_MvpMatrix(投影视图模型矩阵), uNormalMatrix
  3. 触发键盘事件, 改变全局变量g_arm1Angleg_joint1Angle, g_joint2Angle, g_joint3Angle, 从而改变全局模型矩阵g_modelMatrix
  4. 多次调用draw画组件,在画手指之前缓存g_modelMatrix, pushMatrix存储矩阵的栈,将矩阵推入栈

\color{blue}{ch10}

纹理图像步骤

  1. 顶点着色器中接收顶点的纹理坐标, 光栅化后传递给片元着色器

var verticesTexCoords = new Float32Array([...])创建顶点坐标和纹理坐标
var a_TexCoord = gl.getAttribLocation()分配并开启

  1. 片元着色器根据片元的纹理坐标,从纹理图像中抽取纹素颜色,赋给当前片元

initTextures()函数负责配置和加载纹理:

var texture = gl.createTexture()创建纹理对象来管理纹理
var u_Sampler = gl.getUni...变量用来接收纹理图像
image.onload = function () { loadTexture(gl, n, texture, u_Sampler, image)}来等图片加载完成执行
loadTexture()用来配置纹理:

  1. gl.pixelStorei()反转转y坐标
  2. gl.activeTexture() 激活纹理单元, --管理
  3. gl.bindTexture()绑定纹理对象, --操作
  4. gl.texParameteri() 配置纹理对象的参数
  5. gl.texImage2D()将纹理图像分配给纹理对象
  6. gl.uniform1i()将纹理单元传递给片元着色器
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,817评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,329评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,354评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,498评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,600评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,829评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,979评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,722评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,189评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,519评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,654评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,329评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,940评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,762评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,993评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,382评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,543评论 2 349

推荐阅读更多精彩内容