Mongodb集群与分片 1

分片集群

 

Mongodb中数据分片叫做chunk，它是一个Collection中的一个连续的数据记录，但是它有一个大小限制，不可以超过200M，如果超出产生新的分片。

 

下面是一个简单的分片集群实例

 

分片集群的构成：

• Shard server：mongod实例，用于存储实际的数据块
• Config server：mongod实例，用于存储整个Cluster Metadata，其中包括chunk信息。
• Route server：mongos实例，做为整个集群的前端路由，整个集群由此接入。从而让整个集群看着像单一进程数据库。
• 备注：route做为路由会将请求转发到实际的目标服务进程，并将多个结果合并并回传客户端。在route并不存储任何的数据和状态，所有的信息都是启动的时候从Config server上获取，当Config server上有信息更新，也会同步到route server上。 

 

构建一个简单的集群

 

集群目录：

总共有四个mongodb，目录分别为/home/scotte.ye/mongo1,mongo2,mongo3,mongo4

其中mongo1,mongo2做为shard server

mongo3做为config server

mongo4做为route server

 

1、启动Shard server

 

// 启动shard server 1

 

$ cd /home/scotte.ye/mongo1

$ ./mongo -shardsvr -port 10000 -dbpath=/home/data/10000/ -fork -logpath=/home/log/10000/null

$ all output going to: /home/log/10000/null

$ fork process: 10657

 

//启动shard server 2

 

$ cd /home/scotte.ye/mongo2

$ ./mongo -shardsvr -port 10011 -dbpath=/home/data/10011/ -fork -logpath=/home/log/10011/null

$ all output going to: /home/log/10011/null

$ fork process: 10661

 

//启动Config server

 

$ cd /home/scotte.ye/mongo3

$ ./mongo -configsvr -port 20000 -dbpath=/home/data/20000/ -fork -logpath=/home/log/20000/null

$ all output going to: /home/log/20000/null

$ fork process: 10857

 

//启动Route server

 

$ cd /home/scotte.ye/mongo4

$ ./mongos -configdb 192.168.35.106:20000 -fork -logpath=/home/log/20000/null

$ all output going to: /home/log/20000/null

$ fork process: 10900

 

//注在启动Route server的时候，还可以通过-chunksize参数来进行配置分块的大小

 

2、配置相关

 

配置相关命令说明：

• addshard：添加shard server到集群。相类似的命令还有，listshards和removeshard
• enablesharding：用于设置那些数据库可以被分布存储
• shardcollection：用于设置具体被分片的集合的名称，且必须指定 share key,系统会自动创建索引
• 注：shardcollection的集合必须只有一个unique index且必须是shard key

开始配置：

 

$ cd /home/scotte.ye/mongo3/bin

$ ./mongo

$ >use admin

$#只有在admin数据库才可以操作

$ switched to db admin

$ >db.runCommand({addshard:'192.168.35.106:10000'})

$ {"shardAdded":"shard0000","OK":1}

$ >db.runCommand({addshard:'192.168.35.106:10011'})

$ {"shardAdded":"shard0001","OK":1}

$#添加相应到shard server到shard cluster

$ >db.runCommand({enablesharding:'test'})

$#使相应的数据库表test可以分布存储,test可以更换成相应的其它数据库名字

$ >db.runCommand({sahrdcollection:'test.user',key:{_id:1}})

$ {"OK":1}

$#指明相应的集合和shard key

$ {"collectionsharded":"test.user","OK":1}

 

3、常用的状态查询命令

• printShardingStatus()：查看Sharding信息
• db.<collection_name>.stats()：查看具体shard存储信息
• isdbgrid：用于确认当前是否是sharding cluster
• ismaster：判断是不是master