iOS OpenGL开发（一）- 专业术语总结

前言

随着短视频、美颜相机等APP愈来愈火，对于一个移动端开发工程师来讲，跟上时代的潮流即是咱们必备的意识。

固然还有一点，接触移动开发，咱们不只仅是要了解若是使用API去将控件摆在屏幕上，咱们还应该去了解，图片是如何去渲染到屏幕上面的，这里面到底有哪些过程，经过了解这些过程以后，在后面的开发这种咱们能怎么去优化项目呢？这里面的门道，每每是一些初中级程序员忽略的部分。

那么这一系列的文章，就是从OpenGL开始，手把手的带你们感觉图形渲染的魅力。在我本身的学习过程当中，也将本身的学习过程，以及学习成果分享给你们。但愿能帮助到你们，若是有不认同的地方，欢迎能在留言中指出来，固然也能够将问题发送到个人邮箱：coderspr1nghall@gmail.com。咱们一块儿讨论，一块儿飞。 这篇文章主要是将一些经常使用的专业术语进行总结，方便本身往后的查阅。

[TOC]

经常使用专业术语

1、语言种类

一、OpenGL

OpenGL (Open Graphics library) 是⼀一个跨编程语⾔、跨平台的编程图形程序接⼝，它将计算机的资源抽象称为一个个OpenGL的对象，对这些资源的操做抽象为一个个的OpenGL指令。

二、OpenGL ES

OpenGL ES (OpenGL for Embedded Systems) 是 OpenGL 三维图形 API 的子集，针对⼿机、 PDA和游戏主机等嵌入式设备而设计，去除了许多没必要要和性能较低的API接口。

三、DirectX

DirectX 是由不少API组成的，DirectX并非一个单纯的图形API. 最重要的是DirectX是属于 Windows上一个多媒体处理API.并不支持Windows之外的平台,因此不是跨平台框架. 按照性 质分类，能够分为四大部分，显示部分、声音部分、输⼊部分和网络部分。

四、Metal

Metal 是Apple为游戏开发者推出了新的平台技术 Metal，该技术可以为 3D 图 像提升 10 倍的渲染性能。Metal 是Apple为了解决3D渲染⽽而推出的框架。

其实苹果自14年推出Metal以后，就已经很明确的告诉你们，在极限性能方面，Metal的表现是要更加的出色的。由于他们对Metal作了不少针对性的优化，让他在iOS的设备上能有一个更完美的发挥。 这里也能够看出，Metal是能够取代OpenGL ES的。可是如今市场上面，依然仍是OpenGL ES的使用率更高。因此OpenGL ES和Metal的关系就有点像是Objective-C和Swift的关系同样。

2、OpenGL专业名词解析

一、OpenGL上下文（Context）

• 在应用程序调用任何OpenGL指令以前，须要安排首先建立一个OpenGL的上下文。这个上下文是一个很是庞大的状态机，保存了OpenGL中的各类状态，这也是OpenGL指令执行的基础。
• 其实这里的上下文，咱们能够类比一下JSContext，我在以前的一篇讲JSCore的博客里面讲到过这个东西。咱们在操做任何的对象的时候，都须要经过上下文去拿到对象，同时上下文里面也记录了不少的咱们须要使用的信息。
• OpenGL的函数无论在哪一个语言中，都是相似C语言同样的面向过程的函数，本质上面都是对OpenGL上下文这个庞大的状态机中的某个状态或者对象进行操做。固然你得首先把这个对象设置为当前对象。所以，经过对OpenGL指令的封装，是能够将OpenGL的相关调用封装成为一个面向对象的图形API的。
• 因为OpenGL上下文是一个巨大的状态机，切换上下文每每会产生较大的开销。可是不一样的绘制模块，可能须要使用彻底独立的状态管理。所以，能够在应用程序中分别建立多个不一样的上下文，在不一样的线程中使用不一样的上下文，上下文之间共享纹理、缓冲区等资源。这样的方案，会比反复切换上下文，或者大量修改渲染状态，更加合理高效的。

二、OpenGL状态机

状态机理论上是一种机器，其实咱们能够这样去理解，状态机描述了一个对象在其生命周期中所经历的各类状态，状态之间的转变，发生转变的动因，条件以及转变中所执行的活动。这一点上来讲，跟JSContext也能够类比一下。咱们的任何行为都是依赖着状态机的，状态机会记录全部的行为，那么咱们在须要使用某一个行为的时候，也是能够经过状态机去拿出来某一个行为。因此状态机也是一种行为，说明对象在其生命周期中相应事件所经历的状态序列以及对那些状态事件的相应。

所以具备如下特色：

• 有记忆功能，能记住其当前的状态
• 能够接受输入，根据输入的内容和本身的原先状态，修改本身当前状态，而且能够有对应输出
• 当进入特殊状态（停机状态）的时候，便再也不接收输入，中止工做。

三、渲染（Rendering）

这个好理解，就是将图形/图像数据转换成3D空间图像操做叫作渲染。例如，在图片或者视频进行解码以后，造成了一大堆的二进制文件，而后咱们将这一堆的二进制文件显示到屏幕上面的过程就能够理解为渲染。

四、顶点数组（VertexArray）

那么什么是顶点呢？顶点就是指咱们再绘制一个图形的时候，他的顶点的位置数据，这个数据是能够直接存储在数组中或者将其缓存在GPU内存中的。若是存储在数组中就构成了顶点数组。其实顶点数据就是咱们在画画的时候，最开始画的一个大体的骨架。在OpenGL中的图像都是由图元组成。在OpenGL ES中，有三种图元：点、线、三角形。咱们经过设定函数的指针，将顶点数据存储在内存中，而后须要绘制的时候，直接从内存中取出来使用。这一部分的数据其实就是顶点数组。

五、顶点缓冲区（VertexBuffer）

咱们上面说了，咱们在调用绘制方法的时候，直接就由内存传入顶点数据。还有一种更加高性能的方法，就是提早分配一快内存，将顶点数据预先传入到显存当中，这部分的显存，就叫作顶点缓冲区。值得注意的是，这一块空间再也不内存中，而是在显存的一块空间中。

六、管线

由于咱们的GPU在处理数据的时候，是经过一个固定的顺序来的，这个顺序不能被打破。相似一个流水线的形式，因此被称之为管线。

七、固定管线/存储着色器

• 在早期的OpenGL版本，它封装了不少着色器程序块内置的一段包含了光照、坐标变换、裁剪等等诸多功能的固定shader程序来完成，来帮助开发者来完成图形的渲染。而开发者只须要传入相应的参数，就能快速完成图形的渲染，相似于iOS开发会封装不少的API。而咱们只须要调用，就能够实现功能，不须要关注底层实现原理
• 可是犹豫OpenGL的使用场景很是丰富，固定管线或存储着色器没法完成每个业务，这是将相关部分开放成可编程。

八、着色器程序Shader

• 就全面的将固定渲染管线架构变为了可编程渲染管线。所以，OpenGL在实际调⽤绘制函数以前，还须要指定一个由shader编译成的着色器程序。常见的着色器主要有顶点着⾊器(VertexShader)，⽚段着⾊器 (FragmentShader)/像素着⾊器(PixelShader)/片元着色器，⼏何着⾊器 (GeometryShader)，曲⾯细分着⾊器(TessellationShader)。⽚段着⾊器和像素着⾊器只是在OpenGL和DX中的不同叫法⽽而已。惋惜的是，直到 OpenGLES 3.0，依然只支持了顶点着⾊器和片断着⾊器这两个最基础的着⾊器。
• OpenGL在处理shader时，和其余编译器同样。经过编译、连接等步骤，⽣成了着⾊器程序(glProgram)，着⾊器程序同时包含了顶点着⾊器和⽚段着⾊器的运算逻辑。在OpenGL进行绘制的时候，⾸先由顶点着⾊器对传⼊的顶点数据进行运算。再经过图元装配，将顶点转换为图元。而后进行光栅化，将图元这种矢量图形，转换为栅格化数据。最后，将栅格化数据传入⽚段着⾊器中进行运算。⽚段着⾊器会对栅格化数据中的每个像素进行运算，并决定像素的颜⾊。

九、顶点着色器VertexShader

• 通常用来处理图形每一个顶点变换[旋转/平移/投影等]
• 顶点着色器是OpenGL中用于计算顶点属性的程序。顶点着色器是逐个顶点运算的程序，也就是说每一个顶点数据都会执行一次顶点着色器，固然这是并行的，而且顶点着色器运算过程当中没法访问其余顶点的数据
• 通常来讲典型的须要计算的顶点属性包括顶点坐标变换、逐个顶点光照运算等等。顶点坐标由自身坐标系转换到归一化作标记的运算，就是在这里发生的。

十、片元着色器 FragmentShader

• 通常用来处理图形中每一个像素点颜色计算和填充
• 片断着色器是OpenGL中用于计算片断（像素）颜色的程序。片断着色器是逐个像素运算的程序，也就是说每一个像素都会执行一次片断着色器，固然也是并行的。

十一、GLSL（OpenGL Shading language)

• OpenGL着色语言（OpenGL Shading language)是用来在OpenGl中着色编程的语言，相似于C语言。他们是在图形卡的GPU（Graphic Proccessor Unit图形处理单元）上执行的。代替了固定的渲染管线的一部分，使渲染管线中不一样层次具备可编程性。好比：视图转换、投影转换等。GLSL的着色器代码分红两个部分：顶点着色器和片断着色器

十二、光栅化Rasterization

• 是把顶点数据转换成片元的过程，具备将图转化成为一个个栅格组成的图像的做用。特色是每一个元素对应帧缓冲区中的一个像素。
• 光栅化就是把顶点数据转换为片元的过程。片元中的每个元素对应于帧缓冲区中的一个像素
• 光栅化实际上是一种将几何图元变为二维图像的过程。该过程包含了两部分的工做。第一部分工做：决定了窗口坐标中哪些整型格栅区域被基本图元占用。第二部分工做：分配一个颜色值和一个深度值到各个区域。光栅化过程产生的是片元。
• 把物体的数学描述以及与物体相关的颜色信息转换为屏幕上用于对应位置的像素及⽤于填充像素的颜色，这个过程称为光栅化，这是一个将模拟信号转化为离散信号的过程

1三、纹理

纹理能够理解为一个图片，也就是位图。⼤家在渲染图形时须要在其编码填充图⽚,为了使得场景更加逼真.⽽这里使⽤的图片,就是常说的纹理.可是在OpenGL,咱们更加习惯叫纹理,⽽不是图片。

1四、混合（Blending）

在测试阶段以后，若是像素依然没有被剔除，那么像素的颜色将会和帧缓冲区中颜色附着上的颜色进行混合，混合的算法能够经过OpenGL的函数进行指定。可是OpenGL提供的混合算法是有限的，若是须要更加复杂的混合 算法，⼀般能够经过像素着⾊器进行实现，固然性能会比原生的混合算法差一些。

1五、变换矩阵(Transformation)

例如图形想发平生移,缩放,旋转变换。就须要使用变换矩阵。

1六、投影矩阵（Projection）

⽤于将3D坐标转换为二维屏幕坐标,实际线条也将在二维坐标下进行绘制。

1七、渲染上屏/交换缓冲区(SwapBuffer)

当咱们想把一个图像渲染到窗口的时候，GPU会开辟一个渲染缓冲区。可是每个窗口又只有一个缓冲区，那么若是在绘制的过程当中屏幕进行了刷新，窗口显示的画面就有可能不完整。为了解决这个问题，常规的OpenGL程序至少都会有两个缓冲区。显示在屏幕上的称为屏幕缓冲区，没有显示的称为离屏缓冲区，在一个缓冲区渲染完成以后，经过将屏幕缓冲区和离屏缓冲区交换，实现图像在屏幕上的显示。在iOS中常常遇到的离屏渲染，其实就是双缓冲区的机制引发的。若是这方面有疑问的，能够移步iOS 保持界面流畅的技巧去了解。 使用了双缓冲区和垂直同步技术以后，因为老是要等待缓冲区交换以后再进行下一帧的渲染，使得帧率没法彻底达到硬件容许的最高水平。为了解决这个问题，引入了三缓冲区技术，在等待垂直同步时，来回交替渲染两个离屏的缓冲区，而垂直同步发生时，屏幕缓冲区和最近渲染完成的离屏缓冲区交换，实现充分利用硬件性能的目的。