vmware vSAN 入门

　

　　参考：https://docs.vmware.com/cn/VMware-vSphere/6.5/com.vmware.vsphere.virtualsan.doc/GUID-18F531E9-FF08-49F5-9879-8E46583D4C70.html

　　参考：https://new.qq.com/omn/20180717/20180717G0AUBL.html

 

1、背景简介

　　一、简单介绍vsphere的共享存储背景

 

　　　vSphere里面有个重要的功能就是进行虚拟机封装，一个虚拟机以文件的形式存在，能够任意拷贝，好比.vmx虚拟机配置文件，vmdk数据文件等

　　　vSphere下还有个集群的概念，一个集群视为一个资源池，搭配不少vSphere的高级特性，业务能够在集群中任意主机上，没必要担忧单主机故障

　　　以下图所示，vSphere的故障恢复机制 HA,能够将故障主机上的虚拟机迁移到其余主机运行。

 

　　　　可是这个特性有个前提是共享存储，一个存储能够被多个服务器同时链接，同时读取数据，任意节点故障，数据不受影响，进而其余服务器可使用这些数据快速恢复业务。

　　　　双机头冗余存储以下：

　　

　　二、简单对比共享存储与分布式存储

 

　　本地存储一贯以可靠性高、稳定性好，功能丰富而著称，但存储扩展性差、价格贵，数据连通困难等问题，容易造成数据孤岛，致使数据中心管理和维护居高不下

　　

　　分布式存储：将数据分散存储在网络上的多台独立设备上，通常采用标准x86服务器和网络互联，并在其上运行相关存储软件，好比vSAN，系统对外做为一个总体提供存储服务

　　

　　

　　　　

2、vSAN简介

　　一、官方介绍

 

        什么是vSAN能够理解为软件定义的基于服务器集群搭建的分布式存储。

　　 存储的管理程序是软件实现，只有软件才能作到开发、灵活、快速，适应企业对于存储的种种需求，分布式能够将数据、IO访问分散到多个节点，让整个存储系统随着节点的增多容量和性能线性增长。

　　　　图示以下：

 

 　　VMware vSAN 聚合本地本或直接链接数据存储设备，并建立在vSAN集群的全部主机之间共享的单个存储池。vSAN消除了对外部共享存储的需求，并简化了存储配置和虚拟机配置。

　　vSAN是ESXi虚拟机管理程序中包含的分布式软件层，它与VMware vSphere彻底集成。vSAN支持须要共享存储的vSphere功能，例如高可用性（HA），vMotion和分布式资源调度程序（DRS）。VM存储策略使您能够定义虚拟机存储要求和功能。

　　vSAN群集中的每一个主机均可觉得群集提供存储。这些存储设备组合在一块儿以建立单个vSAN数据存储。混合vSAN集群使用闪存设备做为缓存层，磁驱动器使用容量层。全闪存vSAN群集将闪存设备用于缓存层和容量层。该体系结构建立了专为虚拟环境设计的闪存优化，弹性共享数据存储。

　　

　　　

　　

 

　　二、vSAN概念

 

　　　　软件定义存储的一个关键要素时基于存储策略的管理（storage policy-based manage-ment，SPBM），这时vSAN特性之一，经过SPBM和vsphere API，底层存储技术表现为一个具备多种功能的抽象化的存储空间池，并展示给管理员用于部署。

　　　　能够配置混合集群或全闪集群，混合集群中，闪存用于缓存，磁盘用于容量，全闪集群中，闪存同时用于缓存和容量。　（缓存和容量组合让存储性能更佳，全闪没得说更快）

　　　　本地存储设备，必须至少一个闪存缓存设备和一个容量设备

　　　　每台节点都须要提供存储资源、访问资源及管理程序

　　　　通常须要万兆以太网交换机

　　　　主机上的设备将构成一个或多个磁盘组，每一个磁盘组包含一个闪存缓存设备，及一个或多个持久化存储容量设备。每一个主机上能够配置多个磁盘组

 

　　三、vSAN功能和特性

 

　　　　特性：

　　　　内置在vsphere内核中，vSAN在vSphere内核内部实现，与vSphere无缝集成，可帮助优化性能和可靠性

　　　　读/写（I/O）缓存，vSAN经过服务器端闪存中内置缓存，加快读/写磁盘I/O的速度，将存储延迟降到最低程度

　　　　内置故障保护，该技术利用分布式RAID和缓存镜像确保磁盘、主机或网络发送故障时毫不丢失数据

　　　　无中断容量可扩展性，能够经过为集群添加主机或为主机添加磁盘，轻松地无中断扩展vSAN数据容量

　　　　以虚拟机为中心的基于策略的管理，该解决方案采用可自动转换为系统配置的策略语句降存储要求与各个虚拟机或虚拟磁盘关联起来，采用该方法，IT任意能够当即调配存储以严格遵照服务级别协议（service-level agreement，SLA）。

　　　　自行调节存储和动态存储负载平衡，vSAN自动无中断地保持为每一个虚拟机指定的存储容量、性能和可用性级别，该技术能够与VMware vSphere Distributed Resource Scheduler进行互操做，实现端到端的技术和存储负载均衡。

　　　　与vSphere数据服务集成,该解决方案利用vSphere快照、克隆、VMware vSphere Data Protection和vSphere Replication，跨集群或站点提供数据保护、备份、快速克隆和数据传参以便进行容灾恢复

　　　　与vSphere web client集成

　　　　普遍的硬件兼容性

　　　　与HORIZON VIEW 和VMware vCenter site Recovery Manager互操做，该解决方案能够与 horizon view一块儿部署在虚拟桌面基础架构（VDI）环境中，与vCenter Site Recovery Manager 一块儿部署在灾难恢复环境中

 

　　　　功能：

　　　　共享存储支持，vSAN支持须要共享存储的VMware功能，如HA、vMotion和DRS，例如，若是某个主机过载，DRS可降虚拟机迁移到集群中的其余主机上

　　　　彻底磁盘簇（JBOB），支持在刀片服务器环境中使用JBOB，若是您集群包含刀片服务器，您能够用链接到刀片服务器的JBOB存储来扩展数据存储容量

　　　　全闪和混合配置

　　　　磁盘格式，vSAN6.6支持磁盘虚拟文件格式5.0，该格式按vSAN集群提供高度扩展的快照和克隆管理支持

　　　　故障域，vSAN支持配置故障域，当vSAN群集阔玥数据中心的多个机架或刀片服务器机箱时，能够防止主机出现机架或机箱故障

　　　　延伸群集，vSAN支持延伸集群，这类集群能够跨两个地址位置

　　　　vSAN Health Service，包含一些预配置的运行情况检查测试，能够执行健康和故障排除并诊断集群组件出现问题的缘由，还能够识别任何潜在风险

　　　　vSAN 性能服务，包含用于监控IOPS、吞吐量、延迟和拥堵的统计图表。能够监控vSAN集群、主机、磁盘组、磁盘和虚拟机性能

　　　　与vSphere存储功能集成，一般用于VMFS和NFS存储的vSphere数据管理功能相集成，这些功能包括快照、连接克隆、vSphere Replication和vSphere APIs for data protection

　　　　虚拟机存储策略，域虚拟机存储策略结合使用，可支持以虚拟机为中心的存储管理方法，如美分配，会自动降vSAN默认存储策略分配给虚拟机

　　　　快速置备，在建立和部署期间，vSAN能够在vCenter server中快速置备存储

 

　　四、几个关于vSAN名词和术语

　　　　池化

　　　　　　单机内部的链接

　　　　　　服务器之间的链接

　　　　故障域

　　　　　　　　

　　　　　　　　为了保证数据不丢修，数据的存放位置就要必定的要求了，同一份虚拟机的同一份数据，必须保存在不一样主机上

　　　　　　　如一台出现故障，这个时候须要仲裁机制保证只有一份数据时活动且最新的，否则会形成冲突

　　　　　　这个时vSAN最简单的架构，只容许一台主机故障，只要故障发送在一台主机内

　　　　　　下面时vSAN故障域简单示意，vSAN中有个词叫FTT（Fault to tolerance），最大容许同时故障多少台主机，FTT决定的时虚拟机数据保护级别，也决定了一个集群所需的最小数量，一个集群中主机数量》=2n+1，n=FTT的值

　　

　　　　区分服务

　　　　　　能够经过存储策略来给不一样的对象区分不一样的服务

　　　　　　例如：

　　　　　　　　虚拟机1 设置存储策略A （FTT=1 ,不预留缓存，限制IOPS为100）

　　　　　　　　虚拟机2 设置存储策略B（FTT=2,预留10%的ssd缓存，不限制IOPS）

 

　　　　磁盘组

　　　　　　磁盘组是为vSAN集群提供性能和容量的主机和物理设备组上的物理存储容量单元，在相vSAN集群提供其本地设备的每一个esxi主机上，设备按磁盘组形式进行组织

　　　　　　每一个磁盘组必须具备一个闪存缓存设备和一个或多个容量设备

　　　　　　每一个磁盘组最少一块SSD+1~7快HDD，每台主机不能多于5个磁盘组

　　　　　　用于缓存的设备不能在磁盘组之间共享，也不用于其余目的，单个缓存设备必须专用于单个磁盘组，在混合集群中，闪存设备用于缓存层，磁盘用于存储容量层

 

　　　　　　　　建议，使用多个磁盘组分散数据，由于好比ssd故障，会致使磁盘组数据均会没法访问，分散数据能有效减小此故障带来的影响　　　　　　

 

　　　　全部容量

　　　　　　全部容量指一个或多个虚拟机随时使用的物理容量，所用容量由多种因素决定，包括VMDK、包含副本等内容所使用的容量技术缓存大小时，不考虑用于包含副本的容量。

 

　　　　基于对象的存储

　　　　　　1）vSAN以灵活的数据容器也就是对象形式存储并管理数据，对象时之其数据和元数据分布于集群中逻辑卷，例如每一个VMDK,每一个快照也是一个对象，在vSAN数据存储上置备虚拟机时，vSAN为每一个虚拟磁盘建立一组由多个组件组成的对象。

　　　　　　2）基于已分配的虚拟机存储策略，vSAN单独置备和管理每一个对象，可能还设计为每一个对象建立一个RAID配置

　　　　　　3）在vSAN为虚拟磁盘建立对象并肯定如何在集群中分布对象时，将考虑如下因素：

　　　　　　　　A、vSAN确认已根据指定虚拟机存储策略设置应用虚拟磁盘要求

　　　　　　　　B、vSAN确认使用正确的集群资源进行置备。例如，vSAN基于保护此类肯定要建立副本数量，性能策略肯定为每一个副本分配Flash Read Cache量和建立的带数，以及每一个副本在集群中的放置位置。

　　　　　　　　C、vSAN持续监控和保护虚拟磁盘的策略合规性状态，若是发现任何不合规的策略状态，必须进行故障排除并解决根本问题。

　　　　　　　　D、必要时，能够编辑虚拟机存储策略设置，更改存储策略设置不会影响虚拟机访问，更改虚拟机存储策略设置时，vSAN可能启动对象从新建立过程，随后会从新同步对象。

　　　　　　　　E、vSAN确认所需保护组件（例如镜像和证实）位于不一样的主机或容错域上

 

　　　　　　　　

　　　　　　

　　　　vSAN数据存储

　　　　　　1）在集群上启用vSAN后，将建立一个单独的vSAN数据存储，单个vSAN数据存储能够为每一个虚拟机或每一个虚拟机磁盘提供不一样的服务级别

　　　　　　1）须要考虑vSAN数据存储特定特性

　　　　　　　　A、vSAN提供群集中因此主机（不管是否具备设备）都可访问的单个vSAN数据存储，每一个主机都可挂载任何其余数据存储，包括Virtual Volume、VMFS或NFS

　　　　　　　　B、可使用Storage vMotion在vSAN数据存储、NFS和VMFS数据存储之间移动虚拟机

　　　　　　　　C、仅用于容量的磁盘和闪存设备能够提供数据存储容量，用于闪存缓存的设备不计入数据存储的一部分

　　　　　　　　D、在自动磁盘声明模式下，当向vSAN群集添加具备容量的主机，或者向任何群集成员添加容量设备时，vSAN数据存储大写会动态增加。

 

　　　　对象和组件

　　　　　　1）每一个对象由一组组件组成，例如.vmx、日志文件、vmdk、快照增量描述文件等

　　　　　　2)vSAN数据存储保护如下对象类型：

　　　　　　　　A、虚拟机主页命令空间

　　　　　　　　　　全部虚拟机配置文件均存储在虚拟机主目录中，例如.vmx、日志文件、vmdk（vmdk磁盘描述文件fvmdk-lag才是磁盘文件）、快照增量描述文件等。

　　　　　　　　B、VMDK

　　　　　　　　　　虚拟机磁盘或.vmdk文件，用于存储虚拟机硬盘驱动器内容。

　　　　　　　　C、虚拟机交换对象

　　　　　　　　　　打开虚拟机电源时建立-SWDK文件

　　　　　　　　D、快照增量VMDK

　　　　　　　　　　生成虚拟机快照时建立

　　　　　　3）vSAN组件是对象区块，这些对象去看跨机器中的多台主机分布，以便允许同时发送多个故障并知足性能要求

　　　　　　4）vSAN利用分布式RAID体系机构将数据分发到整个集群中

　　　　　　5）组件的分布主要采用两种技术：

　　　　　　　　条带化（RAID 0）

　　　　　　　　镜像（RAID 1）

　　　　　　6）建立多少组件副本基于对象策略定义决定

 

　　　　　虚拟机合规性状态：合规和不合规

　　　　　　　一个过多个对象不能知足分配的存储策略要求时，虚拟机被视为不合规，例如，其中要给镜像副本没法访问，状态可能变得不合规，入股哦虚拟机域存储策略中定义的要求相符，虚拟机的状态则为合规。在虚拟磁盘页面的物理磁盘放置位置选项卡中，可肯定虚拟机对象的合规性状态

 

　　　　　组件状态：已降级和不存在状态

　　　　　　　已降级，若是检查到永久故障，并肯定没法恢复到原始工做状态，则该组件将处于已降级状态。

　　　　　　　不存在，vSAN检查到临时组建故障，其中组件及其素有数据能够恢复且vSAN可以恢复其原始状态，则该组件处于不存在状态，从新启动主机或从vSAN主机拔出设备时可能出现，等待60分钟后，vSAN将从新构建处于不存在的状态组件

 

　　　　　对象状态：正常和不正常

　　　　　　　根据集群中出现的故障类型和数量，对象可能处于如下状态之一：

　　　　　　　　正常，当至少要给RAID1镜像可用或者最低所需数据段数可用是，则认为对象处于正常状态。

　　　　　　　　不正常，若是没有可用的完整镜像，或者RAID5或RAID6对象不知足数据段最低数量要求，则该对象将被视为不正常。若是对象的投票数少于50%，则该对象不正常，若是群集中出现多个故障，则可能致使对象不正常，会影响虚拟机的可用性

 

　　　　　证实

　　　　　　　　一个仅包含元数据的组件，不包含任何实际应用程序数据，若是发送潜在故障，则在须要肯定正常的数据存储组件的可用性时，可将其用作te breaker。若是使用磁盘格式1.0，则见证在vSAN数据存储中占用觉2mb空间存放元数，二若是使用2.0或更高，则会占用4mb空间

　　　　　　　　6.0及更高会经过要给非对此投票系统来保持仲裁，其中，每一个组件可能使用多个投票来决定对象的可用性，构成虚拟机存储对象的投票中超过50%，则vSAN数据存储将没法在访问该对象，没法访问的对象可能会影响相关虚拟机的可用性

　　　　　

　　　　

　　　　   条带化

　　　　　　是自动将I/O的负载均衡到多个物理磁盘上的技术，条带化技术就是将一块连续的数据分红不少小部分并把他们分布存储到不一样磁盘上去，这就能使多个进程同时访问数据的多个不一样部分而不会形成磁盘重读，并且在须要对这种数据进行顺序访问的时候能够得到最大成都的I/O并行能力，从而得到很是好的性能，

　　　　　　图例以下：

　　　　　　　　每一个对象的磁盘条带数

　　　　　　　　　　存储对象的每一个副本所跨的硬盘数

 

　　　　　基于存储策略的管理（SPBM）

　　　　　　　　使用vSAN时，能够采用策略形式定义虚拟机的存储要求，例如性能和可能性，vSAN可确保为已部署到vSAN数据存储的虚拟机至少分配一个虚拟机存储策略，当您了解虚拟机的存储要求时，能够定义存储策略并将其分配给虚拟机，若是部署虚拟机时不该用存储策略，vSAN将自动分配默认vSAN策略，其中容许的故障数主要级别配置为1，每一个对象一个磁盘带，并具备一个精简置备虚拟磁盘，为得到最佳效果，应定义您本身的虚拟机存储策略，即便您的策略要求于默认存储策略中定义的相同

　　　　

　　　　　ruby vSphere 控制台（RVC）

　　　　　　RVC,提供用于管理和故障排除vSAN群集的命令行界面，RVC可提供集群范围的试图，而不是esxcli提供的以主机为中心的试图，与vcsa捆绑不须要单独安装

 

　　　　   vSphere PowerCLI

　　　　　　增长了vSAN的命令行脚本支持，有助于自动化完成配置及管理任务

 

　　　　    vSAN Observer 

　　　　　　是在RVCS上容许的基于web 的工具，可用于进行升入的性能分析和vSAN群集监控，使用vSAN Observer可查看容量层的性能统计信息、物理磁盘组的统计信息、CPU的当前负载、vSAN内存池的使用状况以及内存对象在vSAN群集间的分布状况

 

　　五、vSAN核心思想

 

　　　　提升现有资源的利用率

　　　　下降运维成本

　　　　提升硬件和应用程序的可用性

　　　　实现运维灵活性

　　　　提升桌面的可管理性和安全性

　　六、经过vsphere web client实现的主要功能

 

　　　　vMotion，DRS、HA等高级功能都是基于这一技术

　　　　DRS动态资源分配技术，使得多台物理服务器中运行的虚拟机能够实现负载均衡，当检测到某台服务器负载临近阈值时，就能够经过vMotion技术进行在线迁移。

　　　　DPM分布式电源管理能够结合DRS功能，将多个负载较低的虚拟机集中到少数物理服务器上，把无用的关机，从而节省电力，负载增长时，对没有使用的物理服务器加电开机，在经过DRS实现负载均衡。

　　　　storage vMotion存储在线迁移技术，容许正在运行的虚拟机存储资源从一个存储设备迁移到另外一个存储设备

　　　　data protection 数据保护功能，能够对虚拟机进行备份

　　　　高可用性，当一台物理服务器出现故障时，能够将受影响的虚拟机迁移到其余服务器上

　　　　FT容错，运行在不一样物理服务器上运行两台彻底同样的虚拟机，提供最高等级的冗余性，即便一台物理服务器发生故障也不会终端业务运行

　　　　replication，能够复制虚拟机的全部镜像到另外一个站点，进行容灾恢复，保证数据安全

 

 

 

　　　　　　

 

转载请注明出处：http://www.javashuo.com/article/p-mfwqxaxb-er.html