1 环境准备、集群模型
1.1 准备环境
Mongo01：10.10.73.142
Mongo02：10.10.73.147
Mongo03：10.10.73.148
1.2 集群模型
Mongos: 20000/tcp
Config： 21000/tcp
Shard1： 22001/tcp
Shard2： 22002/tcp
Shard3: 22003/tcp
node1 node2 node3
ip 10.10.73.142 10.10.73.147 10.10.73.148
mongos 20000 20000 20000
configsvr 21000 21000 21000
shard1 22001[主节点master] 22001[副本slave] 22001[仲裁arbitrate]
shard2 22002[仲裁arbitrate] 22002[主节点master] 22002[副本slave]
shard3 22003[副本slave] 22003[仲裁arbitrate] 22003[主节点master]
1.3 下载mongo
mongo 版本(根据服务器选择版本)，选择版本mongodb-linux-x86_64-rhel62-3.2.7.tgz
下载地址https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-rhel62-3.2.7.tgz
1.4 创建安装目录
每台服务器执行
mkdir –p /opt/mongo/
1.5 创建服务目录
每台服务器执行
mkdir –p /data/mongodb/mongos/log
mkdir –p /data/mongodb/config/{data,log}
mkdir –p /data/mongodb/shard{1,2,3}/{data,log}
2 安装配置mongo
2.1 10.10.73.142服务器安装mongo
1、上传mongodb-linux-x86_64-rhel62-3.2.7.tgz到/opt/mongo路径下
cd /opt/mongo
2、解压mongodb-linux-x86_64-rhel62-3.2.7.tgz
tar –zxvf mongodb-linux-x86_64-rhel62-3.2.7.tgz
2.2 10.10.73.142创建服务器对应配置文件
1、创建conf路径
mkdir –p /opt/mongo/mongodb-linux-x86_64-rhel62-3.2.7/conf
2、配置config.conf、mongos.conf、shard1.conf、shard2.conf、shard3.conf
#####################config.conf#####################
systemLog: destination: file ###日志存储位置 path: /data/mongodb/config/log/config.log logAppend: true storage: ##journal配置 journal: enabled: true ##数据文件存储位置 dbPath: /data/mongodb/config/data/ ##是否一个库一个文件夹 directoryPerDB: true ##数据引擎 engine: wiredTiger ##WT引擎配置 wiredTiger: engineConfig: ##WT最大使用cache（根据服务器实际情况调节） cacheSizeGB: 8 ##是否将索引也按数据库名单独存储 directoryForIndexes: true ##表压缩配置 collectionConfig: blockCompressor: zlib ##索引配置 indexConfig: prefixCompression: true ##端口配置 net: port: 21000 ##分片配置 sharding: ##分片角色 clusterRole: configsvr
#####################mongos.conf#####################
##日志配置 systemLog: destination: file ##日志位置 path: /data/mongodb/mongos/log/mongos.log logAppend: true ##网路配置 net: ##端口配置 port: 20000 ##分片配置 sharding: ##指定config server configDB: 10.10.73.142:21000,10.10.73.147:21000,10.10.73.148:21000
#####################shard1.conf#####################
systemLog: destination: file ###日志存储位置 path: /data/mongodb/shard1/log/shard1.log logAppend: true storage: ##journal配置 journal: enabled: true ##数据文件存储位置 dbPath: /data/mongodb/shard1/data/ ##是否一个库一个文件夹 directoryPerDB: true ##数据引擎 engine: wiredTiger ##WT引擎配置 wiredTiger: engineConfig: ##WT最大使用cache（根据服务器实际情况调节） cacheSizeGB: 8 ##是否将索引也按数据库名单独存储 directoryForIndexes: true ##表压缩配置 collectionConfig: blockCompressor: zlib ##索引配置 indexConfig: prefixCompression: true ##端口配置 net: port: 22001 replication: ##oplog大小 oplogSizeMB: 40960 ##复制集名称 replSetName: shard1 ##分片配置 sharding: ##分片角色 clusterRole: shardsvr
#####################shard2.conf#####################
systemLog: destination: file ###日志存储位置 path: /data/mongodb/shard2/log/shard2.log logAppend: true storage: ##journal配置 journal: enabled: true ##数据文件存储位置 dbPath: /data/mongodb/shard2/data/ ##是否一个库一个文件夹 directoryPerDB: true ##数据引擎 engine: wiredTiger ##WT引擎配置 wiredTiger: engineConfig: ##WT最大使用cache cacheSizeGB: 8 ##是否将索引也按数据库名单独存储 directoryForIndexes: true ##表压缩配置 collectionConfig: blockCompressor: zlib ##索引配置 indexConfig: prefixCompression: true ##端口配置 net: port: 22002 replication: ##oplog大小 oplogSizeMB: 40960 ##复制集名称 replSetName: shard2 ##分片配置 sharding: ##分片角色 clusterRole: shardsvr
#####################shard3.conf#####################
systemLog: destination: file ###日志存储位置 path: /data/mongodb/shard3/log/shard3.log logAppend: true storage: ##journal配置 journal: enabled: true ##数据文件存储位置 dbPath: /data/mongodb/shard3/data/ ##是否一个库一个文件夹 directoryPerDB: true ##数据引擎 engine: wiredTiger ##WT引擎配置 wiredTiger: engineConfig: ##WT最大使用cache（根据服务器实际情况调节） cacheSizeGB: 8 ##是否将索引也按数据库名单独存储 directoryForIndexes: true ##表压缩配置 collectionConfig: blockCompressor: zlib ##索引配置 indexConfig: prefixCompression: true ##端口配置 net: port: 22003 replication: ##oplog大小 oplogSizeMB: 40960 ##复制集名称 replSetName: shard3 ##分片配置 sharding: ##分片角色 clusterRole: shardsvr
2.3 10.10.73.147、10.10.73.148服务器安装配置
1、登录10.10.73.142服务器
cd /opt/mongo
2、scp至10.10.74.147服务器
scp -r mongodb-linux-x86_64-rhel62-3.2.7 root@10.10.73.147:/opt/mongo/
3、scp至10.10.74.148服务器
scp -r mongodb-linux-x86_64-rhel62-3.2.7 root@10.10.73.148:/opt/mongo/
3 启动相应服务
每台服务器依次执行如下操作
3.1 启动configserver 、mongos、shard
1、切换到/opt/mongo/mongodb-linux-x86_64-rhel62-3.2.7/bin
cd /opt/mongo/mongodb-linux-x86_64-rhel62-3.2.7/bin
2、启动configserver
./mongod -f ../conf/config.conf -fork
3、启动mongos
./mongos -f ../conf/mongos.conf -fork
4、启动shard1
./mongod -f ../conf/shard1.conf -fork
5、启动shard2
./mongod -f ../conf/shard2.conf -fork
6、启动shard3
./mongod -f ../conf/shard3.conf -fork
3.2 初始化分片配置
3.2.1 Shard1
./mongo --port 22001
>use admin
>config = {_id:"shard1",members:[{_id:0,host:"10.10.73.142:22001","priority":9}, {_id:1,host:"10.10.73.147:22001","priority":8},{_id:2,host:"10.10.73.148:22001",arbiterOnly:true}]}
>rs.initiate(config);
3.2.2 Shard2
./mongo --port 22002
>Use admin
>config2 = {_id:"shard2",members:[{_id:0,host:"10.10.73.147:22002"},{_id:1,host:"10.10.73.148:22002"},{_id:2,host:"10.10.73.142:22002",arbiterOnly:true}]}
>rs.initiate(config2);
3.2.3 Shard3
./mongo --port 22003
>Use admin
>config3 = {_id:"shard3",members:[{_id:0,host:"10.10.73.148:22003"},{_id:1,host:"10.10.73.142:22003"},{_id:2,host:"10.10.73.147:22003",arbiterOnly:true}]}
>rs.initiate(config3);
3.3 串联路由服务器与分配副本集
./mongo --port 20000
>use admin
>db.runCommand({addshard:"shard1/10.10.73.142:22001,10.10.73.147:22001,10.10.73.148:22001"});
>db.runCommand({addshard:"shard2/10.10.73.147:22002,10.10.73.148:22002,10.10.73.142:22002"});
>db.runCommand({addshard:"shard3/10.10.73.148:22003,10.10.73.142:22003,10.10.73.147:22003"});
3.4 查看分片服务器的配置
./mongo --port 20000
>use admin
>db.runCommand({listshards:1});
3.5 安装完成
4 插入测试
./mongo --port 20000
>use admin
#创建数据库，指定数据库'testdb'进行分片生效
>db.runCommand( { enablesharding :"testdb"});
#指定数据库需要分片键片
>db.runCommand({shardcollection:"testdb.table1",key:{_id:'hashed'}})
#创建Hash片键，指定'testdb'数据库中的'table1'表中的数据进行分片
#插入
>for(var i=1;i<10;i++) db.table1.save({"a":i+"wwe","acId":"45334"+i,"areaCode":"3346"+i,"deliverd":true,"destId":"13346"+i,"doneTime":"6334"+i,"dup":0,"gwId":"2","gwMsgId":"6334"+i,"mobile":"166673","msgType":"UmsReportReq"+i,"operator":"ChinaMobile","priority":0,"reqId":"1","revTime":"245"+i,"smscSeq":0,"srcReqId":"06235"+i,"status":"DELIVRD","subTime":"26230"+i,"submitTime":"1062348"+i,"traceNo":"92363"+i});
#查看状态
>db.table1.stats();
#查看数据
> db.table1.find({});