技术圈流行一句话,凡脱离业务谈架构的,都是耍流氓。做为微服务改造系列的第一篇博客,首先介绍一下实施此次技术改造的背景。html
第一,我所在公司(简称XR)的后台服务采用的主技术栈是Scala,虽然开发效率很高,但也带来一系列的反作用。1.因为Scala语言强大的表达能力和丰富的函数式特性,很容易写出俗称“意大利面条”式的代码,一个类文件动辄上千行,代码的可读性很是差,致使可维护性也不好。2.编译Scala源码时首先须要将Scala源码转换成Java源码而后再经过JVM进行编译,加上隐式类型的存在进一步拖慢了编译期间的类型推导,Scala的编译速度比Java足足慢了一个数量级,这个差别在代码量少的时候还不明显,但随着代码量的上升,就成了团队的一个nightmare,试想本地全量编译一次须要10+分钟。3.Scala小众语言的标签决定了Scala程序员的稀缺性,晦涩难懂的官方文档拔高了学习曲线,后果就是高昂的招聘成本和漫长的培养时间。以上这些反作用不但抵消了先期开发效率上的优点,并且使得对新需求的响应能力愈来愈慢,技术负债也越垒越高。程序员
第二,历经2年多的产品迭代,整个后台服务项目愈来愈庞大,已经成为一个典型意义上的单体应用(也就是Martin Fowler常说的monolithic application):1.各个业务模块犬牙交错,重复代码随处可见,补丁代码越打越多。2.任何一个改动都须要一次全量发布,哪怕是修改一句文案。数据库
第三,与微服务化改造同时进行的是容器化改造,若是不对上述单体应用进行拆分,不少容器化带来的好处就会被削弱,甚至毫无心义,好比提升资源利用率(CPU型应用和内存型应用搭配部署),异构应用的环境隔离能力等。缓存
谷歌前研发总监Tiger曾经说过,一个系统的演化通常会经历三个阶段,首先是under-engineer,而后是over-engineer,最后才是right-engineer。考虑到参与这次微服务改造的人员有限(一人主导,多人配合),同时也是团队第一次尝试作这类系统性的改造,最后咱们决定采起一条比较实用的改良式路线:微信
最小化对已有应用的侵入性架构
偏好主流的微服务框架app
只作必要的微服务治理负载均衡
第一条定下了这次改造的基调,下降了方案没法落地的风险,确保了项目的总体可行性。第二条让咱们站在巨人的肩膀上,不重复造轮子,聚焦在问题自己,而不是工具。第三条缩减项目范围,避免过分工程,以战养兵,不打无用之仗。框架
有关微服务的定义,最权威的版本莫属微服务之父Martin Fowler在microservices一文中所述:运维
In short, the microservice architectural style is an approach to developing a single application as a suite of small services, each running in its own process and communicating with lightweight mechanisms, often an HTTP resource API. These services are built around business capabilities and independently deployable by fully automated deployment machinery. -- James Lewis and Martin Fowler
注意其中有3个关键词,small,independently deployable和automated deployment。small对应的就是微服务的微,不少初次接触微服务的同窗对微的理解每每会停留在实现层面,觉得代码少就是微,但实际上,这里的微更多的是体如今逻辑层面。微服务的一个重要设计原则是share as little as possible,什么意思呢?就是说每一个微服务应该设计成边界清晰不重叠,数据独享不共享,也就是咱们常说的高内聚、低耦合。保证了small,才能作到independently deployable。而实现automated deployment的关键是DevOps文化,可参见Fowler另外一篇谈DevOps的文章。
须要提醒的是,随着业务复杂度的上升,一个微服务可能须要拆分为更多更细粒度的微服务,比方说,一开始只是一个简单的订单服务,后面逐步拆分出清算,支付,结算,对帐等其余服务。
与单体应用拆分为微服务的过程相似,随着公司规模的不断扩大,一个组织势必会分化出多个更小的组织。根据康威定律,组织结构决定系统结构,所以,从这个层面来讲,微服务也是一种必然。
康威定律(Conway’s Law):“Any organization that design a system (defined broadly) will produce a design whose structure is a copy of the organization’s communication structure. - Melvin Conway, 1968
从本质上来看,相对单体应用,微服务是以牺牲强一致性、提升部署复杂性为代价,换取更完全的分布式特性,好比异构性和强隔离性。对应CAP理论,就是用Consistency换Partition。异构性比较容易理解,经过定义统一的API规范(通常采用REST风格),每一个微服务团队能够根据各自的能力矩阵选用最适合的技术栈,而不是全部人必须使用相同的技术栈。强隔离性指的是,对于一个典型的单体应用,隔离性最高只能体现到模块级别,因为共享同一个代码仓库,模块的边界每每比较模糊,须要人为定义不少规范来保证良好的隔离性,但不管如何强调,稍一疏忽,就会产生“越界”行为,时间愈长,维护隔离性的成本愈高。而到了微服务阶段,自带应用级别的隔离性,“越界”的成本大大提高,无需任何规范,架构自己就保证了隔离性。
另外一方面,因为采用了分布式架构,微服务没法再简单的经过数据库事务来保证强一致性,而是经过消息中间件或者某种事务补偿机制来保证最终一致性,好比微信朋友圈的点赞,淘宝订单的物流状态。其次,在微服务阶段,随着应用数量的激增,一次发布每每涉及多个应用,加上异构性带来的部署方式的多样性,对团队的运维水平尤为是自动化水平提出了更高的要求,运维和开发的边界进一步模糊。
除了组织架构和技术取舍,领域知识是另外一个很是重要的决策因素。对于不熟悉的业务领域,很难第一次就把各个微服务的边界和接口定义正确,一旦开始开发,重构成本就会很是可观。反过来讲,当对领域知识有了必定的积累,再重构一个单体应用就会容易的多。
综上所述,虽然微服务看上去很美,但在决定采用微服务架构以前,不只要仔细考量团队的技术水平(包括知识结构,理论深度,经验积累和技术氛围),还应综合考虑项目的时间范围,领域知识的熟悉程度,以及所在组织的规模架构。除非这些前提条件都知足,不然单体应用是更适合的选择,就像Fowler建议的那样。
上图是XR微服务化第一阶段的总体架构图。能够看到,一些支撑微服务的必要组件都已包含其中:
服务注册中心:全部服务注册到Consul集群,集成Nginx实现负载均衡,使用Hystrix实现简单的服务降级和熔断机制
CI/CD:利用Jenkins Pipeline实现不停机发布
日志平台:扩展ELK加上Redis缓存
配置中心:使用自研的Matrix系统,最小化对已有应用的侵入性,保证异构系统的兼容性
受权中心:基于Spring Security OAuth,同时支持SSO
消息中心:选用RabbitMQ做为消息中间件
监控平台:利用Consul API获取服务状态,经过Zookeeper触发告警
在微服务化系列的后续文章中,我会针对服务注册、配置中心、受权中心和服务监控分别展开介绍实施过程当中的一些细节和经验。敬请期待。