通常开发一个 APP,会直接调用系统提供的网络请求接口去服务端请求数据,再针对返回的数据进行一些处理,或者使用AFNetworking/OKHttp这样的网络库,管理好请求线程和队列,再自动作一些数据解析,就结束了。html
但对于一些大型 APP,还会想针对网络的一些问题进行进一步优化,包括:前端
对基于浏览器的前端开发来讲,网络这块能作的事情不多,但对于客户端 APP 来讲,整个网络请求过程是自由控制的,能够作不少事情,不少大型 APP 都针对这三个问题作了不少网络层的优化,一些新的网络层协议像 HTTP2 / QUIC 也是在这些方面进行了很多优化,在这里边学习边整理,大体列举一下常见的作法。git
正常一条网络请求须要通过的流程是这样:github
这里有明显的三个优化点:算法
逐条来看能作什么。json
DNS 完整的解析流程很长,会先从本地系统缓存取,若没有就到最近的 DNS 服务器取,若没有再到主域名服务器取,每一层都有缓存,但为了域名解析的实时性,每一层缓存都有过时时间,这种 DNS 解析机制有几个缺点:浏览器
为了解决这些问题,就有了 HTTPDNS,原理很简单,就是本身作域名解析的工做,经过 HTTP 请求后台去拿到域名对应的 IP 地址,直接解决上述全部问题:缓存
其他细节就很少说了,HTTPDNS 优势这么多,几乎成为中大型 APP 的标配。至此解决了第一个问题 — DNS 解析耗时的问题,顺便把一部分安全问题 — DNS 劫持也解决了。安全
第二个问题,链接创建耗时的问题,这里主要的优化思路是复用链接,不用每次请求都从新创建链接,如何更有效率地复用链接,能够说是网络请求速度优化里最主要的点了,而且这里的优化仍在演进过程当中,值得了解下。服务器
HTTP 协议里有个 keep-alive,HTTP1.1默认开启,必定程度上缓解了每次请求都要进行TCP三次握手创建链接的耗时。原理是请求完成后不当即释放链接,而是放入链接池中,若这时有另外一个请求要发出,请求的域名和端口是同样的,就直接拿出链接池中的链接进行发送和接收数据,少了创建链接的耗时。
实际上如今不管是客户端仍是浏览器都默认开启了keep-alive,对同个域名不会再有每发一个请求就进行一次建连的状况,纯短链接已经不存在了。但有个问题,就是这个 keep-alive 的链接一次只能发送接收一个请求,在上一个请求处理完成以前,没法接受新的请求。若同时发起多个请求,就有两种状况:
对这个问题,新一代协议 HTTP2 提出了多路复用去解决。
HTTP2 的多路复用机制同样是复用链接,但它复用的这条链接支持同时处理多条请求,全部请求均可以并发在这条链接上进行,也就解决了上面说的并发请求须要创建多条链接带来的问题,网络上有张图能够较形象地表现这个过程:
HTTP1.1的协议里,在一个链接里传送数据都是串行顺序传送的,必须等上一个请求所有处理完后,下一个请求才能进行处理,致使这些请求期间这条链接并非满带宽传输的,即便是HTTP1.1的pipelining能够同时发送多个request,但response还是按请求的顺序串行返回,只要其中一个请求的response稍微大一点或发生错误,就会阻塞住后面的请求。
HTTP2 这里的多路复用协议解决了这些问题,它把在链接里传输的数据都封装成一个个stream,每一个stream都有标识,stream的发送和接收能够是乱序的,不依赖顺序,也就不会有阻塞的问题,接收端能够根据stream的标识去区分属于哪一个请求,再进行数据拼接,获得最终数据。
解释下多路复用这个词,多路能够认为是多个链接,多个操做,复用就是字面上的意思,复用一条链接或一个线程。HTTP2这里是链接的多路复用,网络相关的还有一个I/O的多路复用(select/epoll),指经过事件驱动的方式让多个网络请求返回的数据在同一条线程里完成读写。
客户端来讲,iOS9 以上 NSURLSession 原生支持 HTTP2,只要服务端也支持就能够直接使用,Android 的 okhttp3 以上也支持了 HTTP2,国内一些大型 APP 会自建网络层,支持 HTTP2 的多路复用,避免系统的限制以及根据自身业务须要增长一些特性,例如微信的开源网络库 mars,作到一条长链接处理微信上的大部分请求,多路复用的特性上基本跟 HTTP2 一致。
HTTP2 的多路复用看起来是完美的解决方案,但还有个问题,就是队头阻塞,这是受限于 TCP 协议,TCP 协议为了保证数据的可靠性,若传输过程当中一个 TCP 包丢失,会等待这个包重传后,才会处理后续的包。HTTP2的多路复用让全部请求都在同一条链接进行,中间有一个包丢失,就会阻塞等待重传,全部请求也就被阻塞了。
对于这个问题不改变 TCP 协议就没法优化,但 TCP 协议依赖操做系统实现以及部分硬件的定制,改进缓慢,因而 GOOGLE 提出 QUIC 协议,至关于在 UDP 协议之上再定义一套可靠传输协议,解决 TCP 的一些缺陷,包括队头阻塞。具体解决原理网上资料较多,能够看看。
QUIC 处于起步阶段,少有客户端接入,QUIC 协议相对于 HTTP2 最大的优点是对TCP队头阻塞的解决,其余的像安全握手 0RTT / 证书压缩等优化 TLS1.3 已跟进,能够用于 HTTP2,并非独有特性。TCP 队头阻塞在 HTTP2 上对性能的影响有多大,在速度上 QUIC 能带来多大提高待研究。
第三个问题,传输数据大小的问题。数据对请求速度的影响分两方面,一是压缩率,二是解压序列化反序列化的速度。目前最流行的两种数据格式是 json 和 protobuf,json 是字符串,protobuf 是二进制,即便用各类压缩算法压缩后,protobuf 仍会比 json 小,数据量上 protobuf 有优点,序列化速度 protobuf 也有一些优点,这二者的对比就不细说了。
压缩算法多种多样,也在不断演进,最新出的 Brotli 和Z-standard实现了更高的压缩率,Z-standard 能够根据业务数据样本训练出适合的字典,进一步提升压缩率,目前压缩率表现最好的算法。
除了传输的 body 数据,每一个请求 HTTP 协议头的数据也是不可忽视,HTTP2 里对 HTTP 协议头也进行了压缩,HTTP 头大可能是重复数据,固定的字段如 method 能够用静态字典,不固定但多个请求重复的字段例如 cookie 用动态字典,能够达到很是高的压缩率,这里有详细介绍。
经过 HTTPDNS,链接多路复用,更好的数据压缩算法,能够把网络请求的速度优化到较不错的程度了,接下来再看看弱网和安全上能够作的事情。
手机无线网络环境不稳定,针对弱网的优化,微信有较多实践和分享,包括:
针对弱网的这些细致优化未成为标准,系统网络库没有内置,不过前两个客户端优化微信的开源网络库 mars 有实现,如有须要可使用。
标准协议 TLS 保证了网络传输的安全,前身是 SSL,不断在演进,目前最新是 TLS1.3。常见的 HTTPS 就是 HTTP 协议加上 TLS 安全协议。
安全协议归纳性地说解决两个问题:1.保证安全 2. 下降加密成本
在保证安全上:
下降加密成本上:
这些点涉及的细节很是多,对 TLS 的介绍有一篇雄文,说得很详细,在此推荐。
目前基本主流都支持 TLS1.2,iOS 网络库默认使用 TLS1.2,Android4.4 以上支持 1.2。TLS1.3 iOS 还处于测试阶段,Android 未查到消息。对于普通 APP,只要正确配置证书,TLS1.2 已经能保证传输安全,只是在建连速度上会有所损耗,有一些大型 APP 像微信就自行实现了 TLS1.3 的部分协议,早一步全平台支持。
网络优化这个话题很是庞大,本文只是在学习过程当中从优化思路上列举了目前业界常见的优化点,还有不少细节不少更深刻的优化没涉及到,网络层实践开发经验不足,如有错误欢迎指出。
转发自:http://www.importnew.com/27914.html