mongodb replica set + shard 安装

概览 - 机器

三台mongo数据节点机器(默认端口27107,这里一台机器存了多份,故新起端口):mongodb

10.13.2.51:10001/10002/10003shell

10.13.2.52:10001/10002/10003数据库

10.13.2.151:10001/10002/10003架构

一台mongos机器:app

10.13.2.112:27107spa

三台config机器:code

10.13.2.91:27109orm

10.13.2.92:27109部署

10.13.2.102:27109it


架构:

数据分散在3台机器上,既有3个shard,而每一个shard又有复制集(简单理解,主备)的配置,便是下面这样

shard1/10.13.2.151:10001,10.13.2.51:10001,10.13.2.52:10001

shard2/10.13.2.151:10002,10.13.2.51:10002,10.13.2.52:10002

shard3/10.13.2.151:10003,10.13.2.51:10003,10.13.2.52:10003


前提工做:

useradd mongodb # 建议用mongodb用户
echo never > /sys/kernel/mm/transparent_hugepage/enabled  #mongodb建议为never
echo never > /sys/kernel/mm/transparent_hugepage/defrag   #mongodb建议为never
关闭防火墙

 

建立第一个replica set

1. 三台数据节点 分别执行

1. mkdir log db db/shard1 db/shard2 db/shard3 # 建立必要的文件夹
2. bin/mongod --dbpath /home/data/mongodb/db/shard1 --port 10001 --replSet shard1 --logpath log/mongodb1.log --logappend --fork # 后台启动mongodb服务

2.链接到mongo配置replica set

1. bin/mongo 10.13.2.151:10001
2. config = {_id:"shard1", members: [  
    {_id: 0, host:"10.13.2.151:10001"},  
    {_id: 1, host:"10.13.2.51:10001"},
    {_id: 2, host:"10.13.2.52:10001"}  
    ]  
}; 
3. rs.initiate(config)


config机器部署

1. 三台config机器上分别执行

1. mkdir log configdb
2. bin/mongod --configsvr --dbpath /home/data/mongodb/configdb --logpath log/mongodb.log --logappend --fork


mongos机器部署

1. mongos机器上执行

1. mkdir log
2. bin/mongos --configdb 10.13.2.91:27019,10.13.2.92:27019,10.13.2.102:27019 --logpath log/mongodb.log --logappend --fork


往集群添加第一个shard

1. 链接mongos,加入shard1

1. bin/mongo 10.13.2.112:27017/admin
2. sh.addShard( "shard1/10.13.2.151:10001,10.13.2.51:10001,10.13.2.52:10001" )


添加第二个shard

首先建立shard2,同上“建立第一个replica set”

1. 三台数据节点 分别执行

1. bin/mongod --dbpath /home/data/mongodb/db/shard2 --port 10002 --replSet shard2 --logpath log/mongodb2.log --logappend --fork # 后台启动mongodb服务

2.链接到mongo配置replica set

1. bin/mongo 10.13.2.151:10002
2. config = {_id:"shard2", members: [  
    {_id: 0, host:"10.13.2.151:10002"},  
    {_id: 1, host:"10.13.2.51:10002"},
    {_id: 2, host:"10.13.2.52:10002"}  
    ]  
}; 
3. rs.initiate(config)

建立完后添加shard2

1. bin/mongo 10.13.2.112:27017/admin
2. sh.addShard( "shard2/10.13.2.151:10002,10.13.2.51:10002,10.13.2.52:10002" )


添加第三个shard

首先建立shard3,同上“建立第一个replica set”

1. 三台数据节点 分别执行

1. bin/mongod --dbpath /home/data/mongodb/db/shard3 --port 10003 --replSet shard3 --logpath log/mongodb3.log --logappend --fork # 后台启动mongodb服务

2.链接到mongo配置replica set

1. bin/mongo 10.13.2.151:10003
2. config = {_id:"shard3", members: [  
    {_id: 0, host:"10.13.2.151:10003"},  
    {_id: 1, host:"10.13.2.51:10003"},
    {_id: 2, host:"10.13.2.52:10003"}  
    ]  
}; 
3. rs.initiate(config)

建立完后添加shard3

1. bin/mongo 10.13.2.112:27017/admin
2. sh.addShard( "shard3/10.13.2.151:10003,10.13.2.51:10003,10.13.2.52:10003" )


以上配置完了,但还须要开启数据库和表的分片

下面以test为例

1. 链接mongos

bin/mongo 10.13.2.112:27017/admin

2.  开启数据库分片

sh.enableSharding( "test" )

3. 建立片键 - (此处片键很重要,关于数据如何分片,通常都是取自己_id做为片键,业务相关根据业务本身组合片键)

1. use test
2. db.test_collection.createIndex( { number : 1 } ) # 这里以test_collection表里的number为片键

4. 开启数据库下面的表分片

1. use test
2. sh.shardCollection( "test.test_collection", { "number" : 1 } )

5. 查看分片状态,数据平衡的状况

1. use test
2. db.stats()
3. db.printShardingStatus()


over!

相关文章
相关标签/搜索