MongoDB分片集群配置实例

环境：

windows操做系统

mongodb 3.4社区版

目标：

配置包含两个分片一个配置服务器的分片集群。其中每个分片和一个配置服务器都被配置为一个单独的副本集。以下图所示：

注：每个分片都应该被配置在一个单独的服务器设备上。方便起见，本文在同一台机器经过不一样端口模拟不一样服务器上的组件，实现分片集群的配置。（生产环境的配置与此相同，只需使用本身的主机名、端口、路径等便可）。

下图为本文配置的分片集群架构，其中的任意节点（副本集节点和分片节点）都是可扩展的。

一、分别为config server、shard-一、shard-2建立数据目录

每个分片成员配置为一个副本集，所以每一个组件下都包含本身的复制集数据目录。

config server、shard-一、shard-2的复制集分别为rs1 、rs二、 rs3 。

每一个复制集各包含三个节点 rsx-0（主节点）、rsx-一、rsx-2 。

其中config server 复制集数据目录以下：shard-一、shard-2分片的复制集目录与此相似、以此类推。

 

每一个成员的端口分配及启动配置以下：

 

二、建立config server 复制集

mongod --configsvr --replSet <setname> --dbpath <path>
--configsvr 声明该实例是分片集群的配置服务数据库
--replSet   指定复制集名称
--dbpath    指定数据存放目录

分别使用如下命令，启动并初始化config server副本集的三个成员：

mongod --configsvr --port 27020 --dbpath E:\devInstall\MongoDB\shard\consrv\rs1-0 --replSet rs1 --smallfiles --oplogSize 128

mongod --configsvr --port 27021 --dbpath E:\devInstall\MongoDB\shard\consrv\rs1-1 --replSet rs1 --smallfiles --oplogSize 128

mongod --configsvr --port 27022 --dbpath E:\devInstall\MongoDB\shard\consrv\rs1-2 --replSet rs1 --smallfiles --oplogSize 128

初始化成功以后，使用mongo shell 链接到3个配置服务器之一：

mongo --host <hostname> --port <port>

链接成功以后，设置复制集及其节点：

rs.initiate(
  {
    _id: "<replSetName>",
    configsvr: true,
    members: [
      { _id : 0, host : "127.0.0.1:27020" },
      { _id : 1, host : "127.0.0.1:27021" },
      { _id : 2, host : "127.0.0.1:27022" }
    ]
  }
)

复制集设置成功以后，使用rs.conf()便可查看相关状态：

 

二、建立shard 复制集（以shard-1为例）

mongod --shardsvr --replSet <replSetname>
--shardsvr  声明此实例为集群的分片数据库实例
--replSet   指定复制集名称

分别使用如下命令，启动并初始化shard-1复制集的三个成员：

shard-1:

mongod --shardsvr --port 27023 --dbpath E:\devInstall\MongoDB\shard\shard-1\rs2-0 --replSet rs2 --smallfiles --oplogSize 128

mongod --shardsvr --port 27024 --dbpath E:\devInstall\MongoDB\shard\shard-1\rs2-1 --replSet rs2 --smallfiles --oplogSize 128

mongod --shardsvr --port 27025 --dbpath E:\devInstall\MongoDB\shard\shard-1\rs2-2 --replSet rs2 --smallfiles --oplogSize 128

初始化成功以后，，使用mongo shell 链接到3个分片服务器之一：

mongo --host <hostname> --port <port>

链接成功以后，设置复制集及其节点：

rs.initiate(
  {
    _id : <replicaSetName>,
    members: [
      { _id : 0, host : "127.0.0.1:27023" },
      { _id : 1, host : "127.0.0.1:27024"},
      { _id : 2, host : "127.0.0.1:27025" }
    ]
  }
)

设置成功后，使用rs.status()查看复制集及各个节点状态：

shard-2复制集配置同上。

三、mongos配置
启动链接到当前分片集群的mongos（路由）。须要使用 --configdb 选项来指定config server复制集。
格式：<configReplSetName>/cfg1.example.net:27017,cfg2.example.net:27017,...
在此，咱们使用config server 复制集的第一个节点在27030端口上启动mongos路由服务：

mongos --configdb "rs1/127.0.0.1:27020" --port 27030

使用mongo shell链接到mongos实例：
使用db.isMster()判断是否到mongos实例，若是存在 "msg":"isdbgrid"，代表成功链接。
   

四、将分片添加到集群中
依然在链接到mongos的mongo shell窗口。
使用sh.addShard("<replSetName>/s1-mongo1.example.net:27017")方法添加shard-1和shard-2两个分片到集群中。

          

五、使用哈希分片对collection进行分区

   开启数据库分片功能：

        sh.enableSharding("<database>")
   
   指定数据库表中的字段key为分片键，并对其使用哈希分片策略。

         sh.shardCollection("<database>.<collection>", { <key> : "hashed" } )  

   到此即结束了分片集群的设置。
   
  例：开启shard数据的分片功能。指定student表的stuNum为哈希索引分片键。向student表插入7条数据记录。以下：

              

    经过mongo 进入1分片shard-1，发现student表中包含5条数据。

             

    经过mongo 进入2分片shard-2，发现student表中包含2条数据。

             

此分片集群中的student表中有7条数据。有5条在shard-1服务器上，2条在shard-2服务器上。（mongodb 经过计算stuNum字段的哈希值决定将其存储在哪个分片上）使用mongos的用户不关心数据存储在哪里，用户只知道这个集群的数据库中有7条student数据记录。