08.存储Cinder→5.场景学习→11.NFS Volume Provider→1.环境搭建

时间 2019-12-01

标签存储 cinder 场景学习 11.nfs nfs provider 环境搭建栏目 Linux 繁體版

原文原文链接

返回总目录

描述

详细

cinder、nova 是如何与 NFS volume provider 协调工做：

NFS Volume Provider：就是咱们一般说的 NFS Server，提供远程 NFS 目录，NFS Clinet 能够 mount 这些远程目录到本地，而后像使用本地目录同样建立、读写文件以及子目录。
cinder-volume：存储节点经过 NFS driver 管理 NFS volume provider 中的 volume，这些 volume 在 NFS 中其实是一个个文件。
nova-compute：计算节点将 NFS volume provider 存放 volume 的目录 mount 到本地，而后将 volume 文件做为虚拟硬盘映射给 instance。mount到存储节点是为了管理，mount到计算节点是为了让instance使用volume。虽然这里volume provider和instance(计算节点)位于同一节点，可是仍然须要mount到计算节点。参考见08.存储Cinder→5.场景学习→11.NFS Volume Provider→3.Attach Volume

说明：

在 Cinder 的 driver 架构中，运行 cinder-volume 的存储节点和 Volume Provider 能够是彻底独立的两个实体。 cinder-volume 经过 driver 与 Volume Provider 通讯，控制和管理 volume。
Instance 读写 volume 时，数据流不须要通过存储节点，而是直接对 Volume Provider 中的 volume 进行读写。正如上图所示，存储节点与 NFS Volume Provider 的链接只用做 volume 的管理和控制（绿色连线）；真正的数据读写，是经过计算节点和 NFS Volume Proiver 之间的链接完成的（紫色连线）。这种设计减小了中间环节，存储节点不直接参与数据传输，保证了读写效率。
1. 其余 Volume Provider（例如 ceph，swift，商业存储等）均遵循这种控制流与数据流分离的设计。

配置NFS Volume Provider

enabled_backends = lvmdriver-1,nfs ：

让 cinder-volume 使用 nfs backend

nfs_mount_point_base = $state_path/mnt：

指定nfs客户端上mount point为$state_path/mnt
其中

查看 /etc/cinder/nfs_shares 活动 nfs 共享目录列表。nfs_shares_config = /etc/cinder/nfs_shares，其内容为172.16.1.55:/storage

NFS volume provider 的 NFS 远程目录为 172.16.1.55:/storage，其中172.16.1.55是计算节点的管理网ip
若是但愿有多个 nfs 共享目录存放 volume，则能够添加到该文件中。

nfs volume driver
设置 volume backend name，根据这里的 volume_backend_name 建立对应的 volume type

root@controller:~# vim /etc/cinder/cinder.conf
[DEFAULT]
enabled_backends = lvmdriver-1,nfs

[lvmdriver-1]
image_volume_cache_enabled = True
volume_clear = zero
lvm_type = auto
iscsi_helper = tgtadm
volume_group = stack-volumes-lvmdriver-1
volume_driver = cinder.volume.drivers.lvm.LVMVolumeDriver
volume_backend_name = lvmdriver-1
[nfs]
nfs_mount_point_base = $state_path/mnt
nfs_shares_config = /etc/cinder/nfs_shares
volume_driver = cinder.volume.drivers.nfs.NfsDriver
volume_backend_name = nfs

root@controller:~# cat /etc/cinder/nfs_shares
172.16.1.55:/storage

重启服务、查看服务

1	root@controller:~# systemctl restart devstack@c-vol.service

建立nfs volume type

打开GUI页面Admin -> Volume -> Volume Types，点击 “Create Volume Type”。
命名 nfs，点击“Create Volume Type”。
选择 nfs ，点击下拉菜单“View Extra Specs”，点击Create,Key 输入 volume_backend_name ；Value 输入 nfs。

在重启cinder-volume服务后，发现报错：

Jun 24 14:43:20 controller cinder-volume[10143]: 

ERROR cinder.service [-] 

Manager for service cinder-volume controller@nfs is reporting problems, not sending heartbeat. Service will appear "down".

以后会出现服务down掉的状况

解决办法是：

在nfs服务器上执行：

root@compute:/# vim /etc/exports

/storage *(rw,sync,no_subtree_check,no_root_squash)

root@compute:/# mkdir /storage

root@compute:/# systemctl restart nfs-kernel-server.service

而后再次重启cinder-volume服务，并查看cinder-volume日志，发现服务正常了