分布式概念

分布式: 
1.将不一样功能数据放到不能的机器上。 
2.将同一数据放到不一样的服务器上(数据副本),服务器之间经过网络互通。(涉及到数据的一致局性问题)。 


分布式系统的CAP理论: 
● 一致性(C):在分布式系统中的全部数据备份,在同一时刻是一样的值。(等同于全部节点访问同一份最新的数据副本) 
● 可用性(A):在集群中一部分节点故障后,集群总体是否还能响应客户端的读写请求。 
    1.对数据更新具有高可用性(一个坏了由另外一个自动成为主节点进行处理。 
    2.不要由于一个节点通讯不上(经过网络链接有时链接不上正常),就出现用户请求出错, 
      在强一致性要求下特别不可用(由于要求每一个节点的数据都是最新的才返回成功,有 
      一个失败都返回失败)。 
● 分区容错性(P):以实际效果而言,分区至关于对通讯的时限要求。系统若是不能在时限内达成数据一致性,就意味着发生了分区的状况,必须就当前操做在C和A之间作出选择。 
    1.就是是否能接受分区(分区就是意味着节点之间可能会通讯不上,可能会长时间链接不上。 
    2.由于是分布式因此是确定选择了分区的,因此你只能在C和A中权衡进行选择了: 
      1)、选择C,可能会由于有节点通讯不上,因此用户请示可能长时间得不到正确的回应,影响A。 
      2)、先择了A,就意味你要牺牲C,道理同选择C是相似的。 php

 

后续继续学习中……java

 

分布式架构的演进mysql


系统架构演化历程-初始阶段架构

初始阶段 的小型系统 应用程序、数据库、文件等全部的资源都在一台服务器上通俗称为LAMP

特征:
应用程序、数据库、文件等全部的资源都在一台服务器上。

描述:
一般服务器操做系统使用Linux,应用程序使用PHP开发,而后部署在Apache上,数据库使用MySQL,聚集各类免费开源软件以及一台廉价服务器就能够开始系统的发展之路了。
 linux

系统架构演化历程-应用服务和数据服务分离

好景不长,发现随着系统访问量的再度增长,webserver机器的压力在高峰期会上升到比较高,这个时候开始考虑增长一台webserver

特征:
应用程序、数据库、文件分别部署在独立的资源上。

描述:
数据量增长,单台服务器性能及存储空间不足,须要将应用和数据分离,并发处理能力和数据存储空间获得了很大改善。
 web

系统架构演化历程-使用缓存改善性能

特征:
数据库中访问较集中的一小部分数据存储在缓存服务器中,减小数据库的访问次数,下降数据库的访问压力。

描述:
系统访问特色遵循二八定律,即80%的业务访问集中在20%的数据上。
缓存分为本地缓存和远程分布式缓存,本地缓存访问速度更快但缓存数据量有限,同时存在与应用程序争用内存的状况。
 sql

系统架构演化历程-使用应用服务器集群

在作完分库分表这些工做后,数据库上的压力已经降到比较低了,又开始过着天天看着访问量暴增的幸福生活了,忽然有一天,发现系统的访问又开始有变慢的趋势了,这个时候首先查看数据库,压力一切正常,以后查看webserver,发现apache阻塞了不少的请求,而应用服务器对每一个请求也是比较快的,看来 是请求数过高致使须要排队等待,响应速度变慢

特征:
多台服务器经过负载均衡同时向外部提供服务,解决单台服务器处理能力和存储空间上限的问题。

描述:
使用集群是系统解决高并发、海量数据问题的经常使用手段。经过向集群中追加资源,提高系统的并发处理能力,使得服务器的负载压力再也不成为整个系统的瓶颈。数据库

系统架构演化历程-数据库读写分离

享受了一段时间的系统访问量高速增加的幸福后,发现系统又开始变慢了,此次又是什么情况呢,通过查找,发现数据库写入、更新的这些操做的部分数据库链接的资源竞争很是激烈,致使了系统变慢

特征:
多台服务器经过负载均衡同时向外部提供服务,解决单台服务器处理能力和存储空间上限的问题。

描述:
使用集群是系统解决高并发、海量数据问题的经常使用手段。经过向集群中追加资源,使得服务器的负载压力不在成为整个系统的瓶颈。apache

系统架构演化历程-反向代理和CDN加速

特征:
采用CDN和反向代理加快系统的 访问速度。

描述:
为了应付复杂的网络环境和不一样地区用户的访问,经过CDN和反向代理加快用户访问的速度,同时减轻后端服务器的负载压力。CDN与反向代理的基本原理都是缓存。后端

系统架构演化历程-分布式文件系统和分布式数据库

随着系统的不断运行,数据量开始大幅度增加,这个时候发现分库后查询仍然会有些慢,因而按照分库的思想开始作分表的工做

特征:
数据库采用分布式数据库,文件系统采用分布式文件系统。

描述:
任何强大的单一服务器都知足不了大型系统持续增加的业务需求,数据库读写分离随着业务的发展最终也将没法知足需求,须要使用分布式数据库及分布式文件系统来支撑。
分布式数据库是系统数据库拆分的最后方法,只有在单表数据规模很是庞大的时候才使用,更经常使用的数据库拆分手段是业务分库,将不一样的业务数据库部署在不一样的物理服务器上。缓存

系统架构演化历程-使用NoSQL和搜索引擎

特征:
系统引入NoSQL数据库及搜索引擎。

描述:
随着业务愈来愈复杂,对数据存储和检索的需求也愈来愈复杂,系统须要采用一些非关系型数据库如NoSQL和分数据库查询技术如搜索引擎。应用服务器经过统一数据访问模块访问各类数据,减轻应用程序管理诸多数据源的麻烦。

系统架构演化历程-业务拆分

特征:
系统上按照业务进行拆分改造,应用服务器按照业务区分进行分别部署。

描述:
为了应对日益复杂的业务场景,一般使用分而治之的手段将整个系统业务分红不一样的产品线,应用之间经过超连接创建关系,也能够经过消息队列进行数据分发,固然更多的仍是经过访问同一个数据存储系统来构成一个关联的完整系统。

纵向拆分:
将一个大应用拆分为多个小应用,若是新业务较为独立,那么就直接将其设计部署为一个独立的Web应用系统

纵向拆分相对较为简单,经过梳理业务,将较少相关的业务剥离便可。

横向拆分:将复用的业务拆分出来,独立部署为分布式服务,新增业务只须要调用这些分布式服务

横向拆分须要识别可复用的业务,设计服务接口,规范服务依赖关系。


系统架构演化历程-分布式服务

特征:
公共的应用模块被提取出来,部署在分布式服务器上供应用服务器调用。

描述:
随着业务越拆越小,应用系统总体复杂程度呈指数级上升,因为全部应用要和全部数据库系统链接,最终致使数据库链接资源不足,拒绝服务。
 

Q:分布式服务应用会面临哪些问题?

A:
(1) 当服务愈来愈多时,服务URL配置管理变得很是困难,F5硬件负载均衡器的单点压力也愈来愈大。
(2) 当进一步发展,服务间依赖关系变得错踪复杂,甚至分不清哪一个应用要在哪一个应用以前启动,架构师都不能完整的描述应用的架构关系。
(3) 接着,服务的调用量愈来愈大,服务的容量问题就暴露出来,这个服务须要多少机器支撑?何时该加机器?
(4) 服务多了,沟通成本也开始上升,调某个服务失败该找谁?服务的参数都有什么约定? 
(5) 一个服务有多个业务消费者,如何确保服务质量?
(6) 随着服务的不停升级,总有些意想不到的事发生,好比cache写错了致使内存溢出,故障不可避免,每次核心服务一挂,影响一大片,人心慌慌,如何控制故障的影响面?服务是否能够功能降级?或者资源劣化? 
 

Java分布式应用技术基础

分布式服务下的关键技术:消息队列架构

消息对列经过消息对象分解系统耦合性,不一样子系统处理同一个消息

分布式服务下的关键技术:消息队列原理

 

分布式服务下的关键技术:服务框架架构

服务框架经过接口分解系统耦合性,不一样子系统经过相同的接口描述进行服务启用
服务框架是一个点对点模型
服务框架面向同构系统
适合:移动应用、互联网应用、外部系统

分布式服务下的关键技术:服务框架原理

 

分布式服务下的关键技术:服务总线架构

服务总线同服务框架同样,均是经过接口分解系统耦合性,不一样子系统经过相同的接口描述进行服务启用
服务总线是一个总线式的模型
服务总线面向同构、异构系统
适合:内部系统
 

分布式服务下的关键技术:服务总线原理

分布式架构下系统间交互的5种通讯模式

request/response模式(同步模式):客户端发起请求一直阻塞到服务端返回请求为止。

Callback(异步模式):客户端发送一个RPC请求给服务器,服务端处理后再发送一个消息给消息发送端提供的callback端点,此类状况很是合适如下场景:A组件发送RPC请求给B,B处理完成后,须要通知A组件作后续处理。

Future模式:客户端发送完请求后,继续作本身的事情,返回一个包含消息结果的Future对象。客户端须要使用返回结果时,使用Future对象的.get(),若是此时没有结果返回的话,会一直阻塞到有结果返回为止。

Oneway模式:客户端调用完继续执行,无论接收端是否成功。

Reliable模式:为保证通讯可靠,将借助于消息中心来实现消息的可靠送达,请求将作持久化存储,在接收方在线时作送达,并由消息中心保证异常重试。

做者:知乎用户
连接:https://www.zhihu.com/question/22764869/answer/31277656
来源:知乎
著做权归做者全部。商业转载请联系做者得到受权,非商业转载请注明出处。
 

分布式架构下系统间交互的5种通讯模式

request/response模式(同步模式):客户端发起请求一直阻塞到服务端返回请求为止。

Callback(异步模式):客户端发送一个RPC请求给服务器,服务端处理后再发送一个消息给消息发送端提供的callback端点,此类状况很是合适如下场景:A组件发送RPC请求给B,B处理完成后,须要通知A组件作后续处理。

Future模式:客户端发送完请求后,继续作本身的事情,返回一个包含消息结果的Future对象。客户端须要使用返回结果时,使用Future对象的.get(),若是此时没有结果返回的话,会一直阻塞到有结果返回为止。

Oneway模式:客户端调用完继续执行,无论接收端是否成功。

Reliable模式:为保证通讯可靠,将借助于消息中心来实现消息的可靠送达,请求将作持久化存储,在接收方在线时作送达,并由消息中心保证异常重试。

五种通讯模式的实现方式-同步点对点服务模式

五种通讯模式的实现方式-异步点对点消息模式1

五种通讯模式的实现方式-异步点对点消息模式2

五种通讯模式的实现方式-异步广播消息模式

分布式架构下的服务治理
服务治理是服务框架/服务总线的核心功能。所谓服务治理,是指服务的提供方和消费方达成一致的约定,保证服务的高质量。服务治理功能能够解决将某些特定流量引入某一批机器,以及限制某些非法消费者的恶意访问,并在提供者处理量达到必定程度是,拒绝接受新的访问。

基于服务框架Dubbo的服务治理-服务管理
道你的系统,对外提供了多少服务,能够对服务进行升级、降级、停用、权重调整等操做
能够知道你提供的服务,谁在使用,因业务需求,能够对该消费者实施屏蔽、停用等操做

基于服务框架Dubbo的服务治理-服务监控


能够统计服务的每秒请求数、平均响应时间、调用量、峰值时间等,做为服务集群规划、性能调优的参考指标。

基于服务框架Dubbo的服务治理-服务路由

基于服务框架Dubbo的服务治理-服务保护

基于服务总线OSB的服务治理-功能介绍

基于服务总线OSB的服务治理

Q:Dubbo究竟是神马?
A:

淘宝开源的高性能和透明化的RPC远程调用服务框架
SOA服务治理方案

Q:Dubbo原理是?
A:

-结束-

相关文章
相关标签/搜索