MongoDB集群搭建

MongoDB集群簡介

mongodb 集群搭建的方式有三種：

主從備份（Master - Slave）模式，或者叫主從復制模式。

副本集（Replica Set）模式

分片（Sharding）模式

其中，第一種方式基本沒什么意義，官方也不推薦這種方式搭建。另外兩種分別就是副本集和分片的方式。

Mongo分片高可用集群搭建

概述

? 為解決mongodb在replica set每個從節點上面的數據庫均是對數據庫的全量拷貝，從節點壓力在高并發大數據量的場景下存在很大挑戰，同時考慮到后期mongodb集群的在數據壓力巨大時的擴展性，應對海量數據引出了分片機制。

什么是分片

? 分片是將數據庫進行拆分，將其分散在不同的機器上的過程，無需功能強大的服務器就可以存儲更多的數據，處理更大的負載，在總數據中，將集合切成小塊，將這些塊分散到若干片中，每個片只負載總數據的一部分，通過一個知道數據與分片對應關系的組件mongos的路由進程進行操作。

基礎組件

其利用到了四個組件：mongos，config server，shard，replica set

mongos

? 數據庫集群請求的入口，所有請求需要經過mongos進行協調，無需在應用層面利用程序來進行路由選擇，mongos其自身是一個請求分發中心，負責將外部的請求分發到對應的shard服務器上，mongos作為統一的請求入口，為防止mongos單節點故障，一般需要對其做HA（高可用，Highly Available縮寫）。

config server

? 配置服務器，存儲所有數據庫元數據（分片，路由）的配置。mongos本身沒有物理存儲分片服務器和數據路由信息，只是緩存在內存中來讀取數據，mongos在第一次啟動或后期重啟時候，就會從config server中加載配置信息，如果配置服務器信息發生更新會通知所有的mongos來更新自己的狀態，從而保證準確的請求路由，生產環境中通常也需要多個config server，防止配置文件存在單節點丟失問題。

shard

? 在傳統意義上來講，如果存在海量數據，單臺服務器存儲1T壓力非常大，考慮到數據庫的硬盤，網絡IO，還有CPU，內存的瓶頸，如果多臺進行分攤1T的數據，到每臺上就是可估量的較小數據，在mongodb集群只要設置好分片規則，通過mongos操作數據庫，就可以自動把對應的操作請求轉發到對應的后端分片服務器上。

replica set

? 在總體mongodb集群架構中，對應的分片節點，如果單臺機器下線，對應整個集群的數據就會出現部分缺失，這是不能發生的，因此對于shard節點需要replica set來保證數據的可靠性，生產環境通常為2個副本+1個仲裁。

整體架構

整體架構涉及到15個節點，我們這里使用Docker容器進行部署

那么我們先來總結一下我們搭建一個高可用集群需要多少個Mongo

• mongos： 3臺

• configserver ： 3臺

• shard ： 3片； 每個分片由三個節點構成

容器部署情況

角色端口暴漏端口描述角色

config-server1	27017	–	配置節點1	–
config-server2	27017	–	配置節點2	–
config-server3	27017	–	配置節點3	–
mongos-server1	27017	30001	路由節點1	–
mongos-server2	27017	30002	路由節點2	–
mongos-server3	27017	30003	路由節點3	–
shard1-server1	27017	–	分片1節點1	Primary
shard1-server2	27017	–	分片1節點2	Secondry
shard1-server3	27017	–	分片1節點3	Arbiter
shard2-server1	27017	–	分片2節點1	Primary
shard2-server2	27017	–	分片2節點2	Secondry
shard2-server3	27017	–	分片2節點3	Arbiter
shard3-server1	27017	–	分片3節點1	Primary
shard3-server2	27017	–	分片3節點2	Secondry
shard3-server3	27017	–	分片3節點3	Arbiter

整體架構預覽

基礎環境準備

安裝Docker

本次使用Docker環境進行搭建，需要提前準備好Docker環境

創建Docker網絡

因為需要使用Docker搭建MongoDB集群，所以先創建Docker網絡

docker network create mongo-cluster docker network ls

搭建ConfigServer副本集

我們先來搭建ConfigServer的副本集，這里面涉及到三個節點，我們需要創建配置文件以及啟動容器

創建掛載目錄

我們需要創建對應的掛載目錄來存儲配置文件以及日志文件

# 創建配置文件目錄 mkdir -p /tmp/mongo-cluster/config-server/conf # 創建數據文件目錄 mkdir -p /tmp/mongo-cluster/config-server/data/{1..3} # 創建日志文件目錄 mkdir -p /tmp/mongo-cluster/config-server/logs/{1..3}

創建密鑰文件

因為我們知道搭建的話一定要高可用，而且一定要權限，這里mongo之間通信采用秘鑰文件，所以我們先進行生成密鑰文件

# 創建密鑰文件 openssl rand -base64 756 > /tmp/mongo-cluster/config-server/conf/mongo.key # 設置 chmod 600 /tmp/mongo-cluster/config-server/conf/mongo.key

創建配置文件

因為由多個容器，配置文件是一樣的，我們只需要創建一個配置文件，其他的容器統一讀取該配置文件即可

echo " # 日志文件 storage:# mongod 進程存儲數據目錄，此配置僅對 mongod 進程有效dbPath: /data/db systemLog:destination: filelogAppend: truepath: /data/logs/mongo.log# 網絡設置 net:port: 27017 #端口號 # bindIp: 127.0.0.1 #綁定ip replication:replSetName: configsvr #副本集名稱 sharding:clusterRole: configsvr # 集群角色，這里配置的角色是配置節點 security:authorization: enabled #是否開啟認證keyFile: /data/configdb/conf/mongo.key #keyFile路徑 " > /tmp/mongo-cluster/config-server/conf/mongo.conf

啟動容器

啟動config-server1

docker run --name config-server1 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/config-server:/data/configdb \ -v /tmp/mongo-cluster/config-server/data/1:/data/db \ -v /tmp/mongo-cluster/config-server/logs/1:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

啟動config-server2

docker run --name config-server2 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/config-server:/data/configdb \ -v /tmp/mongo-cluster/config-server/data/2:/data/db \ -v /tmp/mongo-cluster/config-server/logs/2:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

啟動config-server3

docker run --name config-server3 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/config-server:/data/configdb \ -v /tmp/mongo-cluster/config-server/data/3:/data/db \ -v /tmp/mongo-cluster/config-server/logs/3:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

初始化config-server

登錄容器

進入第一臺容器

docker exec -it config-server1 bash mongo -port 27017

執行命令

執行以下命令進行MongoDB容器的初始化

rs.initiate({_id: "configsvr",members: [{ _id : 1, host : "config-server1:27017" },{ _id : 2, host : "config-server2:27017" },{ _id : 3, host : "config-server3:27017" }]} )

如果出現OK表示MongoDB配置服務器已經初始化成功

創建用戶

因為我們需要對用戶進行權限管理，我們需要創建用戶，這里為了演示，我們創建超級用戶 權限是root

use admin db.createUser({user:"root",pwd:"root",roles:[{role:'root',db:'admin'}]})

這樣就在MongoDB的admin數據庫添加了一個用戶名為root 密碼是root的用戶

搭建Shard分片組

由于mongos是客戶端，所以我們先搭建好config以及shard之后再搭建mongos。

創建掛載目錄

我們先創建掛載目錄

# 創建配置文件目錄 mkdir -p /tmp/mongo-cluster/shard{1..3}-server/conf # 創建數據文件目錄 mkdir -p /tmp/mongo-cluster/shard{1..3}-server/data/{1..3} # 創建日志文件目錄 mkdir -p /tmp/mongo-cluster/shard{1..3}-server/logs/{1..3}

搭建shard1分片組

在同一臺服務器上初始化一組分片

創建密鑰文件

因為集群只需要一個密鑰文件，我們可以將config-server中的密鑰文件復制過來

cp /tmp/mongo-cluster/config-server/conf/mongo.key /tmp/mongo-cluster/shard1-server/conf/

配置配置文件

因為有多個容器，配置文件是一樣的，我們只需要創建一個配置文件，其他的容器統一讀取該配置文件即可

echo " # 日志文件 storage:# mongod 進程存儲數據目錄，此配置僅對 mongod 進程有效dbPath: /data/db systemLog:destination: filelogAppend: truepath: /data/logs/mongo.log# 網絡設置 net:port: 27017 #端口號 # bindIp: 127.0.0.1 #綁定ip replication:replSetName: shard1 #復制集名稱是 shardsvr sharding:clusterRole: shardsvr # 集群角色，這里配置的角色是分片節點 security:authorization: enabled #是否開啟認證keyFile: /data/configdb/conf/mongo.key #keyFile路徑 " > /tmp/mongo-cluster/shard1-server/conf/mongo.conf

啟動shard1-server1

docker run --name shard1-server1 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/shard1-server:/data/configdb \ -v /tmp/mongo-cluster/shard1-server/data/1:/data/db \ -v /tmp/mongo-cluster/shard1-server/logs/1:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

啟動shard1-server2

docker run --name shard1-server2 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/shard1-server:/data/configdb \ -v /tmp/mongo-cluster/shard1-server/data/2:/data/db \ -v /tmp/mongo-cluster/shard1-server/logs/2:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

啟動shard1-server3

docker run --name shard1-server3 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/shard1-server:/data/configdb \ -v /tmp/mongo-cluster/shard1-server/data/3:/data/db \ -v /tmp/mongo-cluster/shard1-server/logs/3:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

初始化shard1分片組

并且制定第三個副本集為仲裁節點

docker exec -it shard1-server1 bin/bashmongo -port 27017

登錄后進行初始化節點，這里面arbiterOnly:true是設置為仲裁節點

#進行副本集配置 rs.initiate({_id : "shard1",members: [{ _id : 0, host : "shard1-server1:27017" },{ _id : 1, host : "shard1-server2:27017" },{ _id : 2, host : "shard1-server3:27017",arbiterOnly:true }]} );

顯示OK即副本集創建成功

創建用戶

因為我們需要對用戶進行權限管理，我們需要創建用戶，這里為了演示，我們創建超級用戶 權限是root

use admin db.createUser({user:"root",pwd:"root",roles:[{role:'root',db:'admin'}]})

查看節點信息

rs.isMaster()

搭建shard2分片組

創建密鑰文件

因為集群只需要一個密鑰文件，我們可以將config-server中的密鑰文件復制過來

cp /tmp/mongo-cluster/config-server/conf/mongo.key /tmp/mongo-cluster/shard2-server/conf/

配置配置文件

因為有多個容器，配置文件是一樣的，我們只需要創建一個配置文件，其他的容器統一讀取該配置文件即可

echo " # 日志文件 storage:# mongod 進程存儲數據目錄，此配置僅對 mongod 進程有效dbPath: /data/db systemLog:destination: filelogAppend: truepath: /data/logs/mongo.log# 網絡設置 net:port: 27017 #端口號 # bindIp: 127.0.0.1 #綁定ip replication:replSetName: shard2 #復制集名稱是 shard2 sharding:clusterRole: shardsvr # 集群角色，這里配置的角色是分片節點 security:authorization: enabled #是否開啟認證keyFile: /data/configdb/conf/mongo.key #keyFile路徑 " > /tmp/mongo-cluster/shard2-server/conf/mongo.conf

啟動shard2-server1

docker run --name shard2-server1 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/shard2-server:/data/configdb \ -v /tmp/mongo-cluster/shard2-server/data/1:/data/db \ -v /tmp/mongo-cluster/shard2-server/logs/1:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

啟動shard2-server2

docker run --name shard2-server2 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/shard2-server:/data/configdb \ -v /tmp/mongo-cluster/shard2-server/data/2:/data/db \ -v /tmp/mongo-cluster/shard2-server/logs/2:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

啟動shard2-server3

docker run --name shard2-server3 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/shard2-server:/data/configdb \ -v /tmp/mongo-cluster/shard2-server/data/3:/data/db \ -v /tmp/mongo-cluster/shard2-server/logs/3:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

初始化shard2分片組

登錄節點后進行初始化分片2

docker exec -it shard2-server1 bin/bashmongo -port 27017

執行下面的命令進行初始化分片2，arbiterOnly:true參數是設置為仲裁節點

#進行副本集配置 rs.initiate({_id : "shard2",members: [{ _id : 0, host : "shard2-server1:27017" },{ _id : 1, host : "shard2-server2:27017" },{ _id : 2, host : "shard2-server3:27017",arbiterOnly:true }]} );

返回ok就表示

創建用戶

因為我們需要對用戶進行權限管理，我們需要創建用戶，這里為了演示，我們創建超級用戶 權限是root

use admin db.createUser({user:"root",pwd:"root",roles:[{role:'root',db:'admin'}]})

搭建shard3分片組

創建密鑰文件

因為集群只需要一個密鑰文件，我們可以將config-server中的密鑰文件復制過來

cp /tmp/mongo-cluster/config-server/conf/mongo.key /tmp/mongo-cluster/shard3-server/conf/

配置配置文件

因為有多個容器，配置文件是一樣的，我們只需要創建一個配置文件，其他的容器統一讀取該配置文件即可

echo " # 日志文件 storage:# mongod 進程存儲數據目錄，此配置僅對 mongod 進程有效dbPath: /data/db systemLog:destination: filelogAppend: truepath: /data/logs/mongo.log# 網絡設置 net:port: 27017 #端口號 # bindIp: 127.0.0.1 #綁定ip replication:replSetName: shard3 #復制集名稱是 shard3 sharding:clusterRole: shardsvr # 集群角色，這里配置的角色是分片節點 security:authorization: enabled #是否開啟認證keyFile: /data/configdb/conf/mongo.key #keyFile路徑 " > /tmp/mongo-cluster/shard3-server/conf/mongo.conf

啟動shard3-server1

docker run --name shard3-server1 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/shard3-server:/data/configdb \ -v /tmp/mongo-cluster/shard3-server/data/1:/data/db \ -v /tmp/mongo-cluster/shard3-server/logs/1:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

啟動shard3-server2

docker run --name shard3-server2 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/shard3-server:/data/configdb \ -v /tmp/mongo-cluster/shard3-server/data/2:/data/db \ -v /tmp/mongo-cluster/shard3-server/logs/2:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

啟動shard3-server3

docker run --name shard3-server3 -d \ --net=mongo-cluster \ --privileged=true \ -v /tmp/mongo-cluster/shard3-server:/data/configdb \ -v /tmp/mongo-cluster/shard3-server/data/3:/data/db \ -v /tmp/mongo-cluster/shard3-server/logs/3:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

初始化shard3分片組

登錄節點后進行初始化分片2

docker exec -it shard3-server1 bin/bashmongo -port 27017

執行下面的命令進行初始化分片3，arbiterOnly:true參數是設置為仲裁節點

#進行副本集配置 rs.initiate({_id : "shard3",members: [{ _id : 0, host : "shard3-server1:27017" },{ _id : 1, host : "shard3-server2:27017" },{ _id : 2, host : "shard3-server3:27017",arbiterOnly:true }]} );

創建用戶

因為我們需要對用戶進行權限管理，我們需要創建用戶，這里為了演示，我們創建超級用戶 權限是root

use admin db.createUser({user:"root",pwd:"root",roles:[{role:'root',db:'admin'}]})

搭建Mongos

mongos負責查詢與數據寫入的路由，是實例訪問的統一入口，是一個無狀態的節點，每一個節點都可以從config-server節點獲取到配置信息

創建掛載目錄

我們需要創建對應的掛載目錄來存儲配置文件以及日志文件

# 創建配置文件目錄 mkdir -p /tmp/mongo-cluster/mongos-server/conf # 創建數據文件目錄 mkdir -p /tmp/mongo-cluster/mongos-server/data/{1..3} # 創建日志文件目錄 mkdir -p /tmp/mongo-cluster/mongos-server/logs/{1..3}

創建密鑰文件

因為集群只需要一個密鑰文件，我們可以將config-server中的密鑰文件復制過來

cp /tmp/mongo-cluster/config-server/conf/mongo.key /tmp/mongo-cluster/mongos-server/conf/

創建配置文件

因為有多個容器，配置文件是一樣的，我們只需要創建一個配置文件，其他的容器統一讀取該配置文件即可,因為Mongos只負責路由，就不需要數據文件了，并且mongos服務是不負責認證的，需要將authorization配置項刪除

echo " # 日志文件 systemLog:destination: filelogAppend: truepath: /data/logs/mongo.log# 網絡設置 net:port: 27017 #端口號 # bindIp: 127.0.0.1 #綁定ip # 配置分片，這里面配置的是需要讀取的配置節點的信息 sharding:configDB: configsvr/config-server1:27017,config-server2:27017,config-server3:27017 security:keyFile: /data/configdb/conf/mongo.key #keyFile路徑 " > /tmp/mongo-cluster/mongos-server/conf/mongo.conf

啟動mongos集群

啟動mongos1

docker run --name mongos-server1 -d \ -p 30001:27017 \ --net=mongo-cluster \ --privileged=true \ --entrypoint "mongos" \ -v /tmp/mongo-cluster/mongos-server:/data/configdb \ -v /tmp/mongo-cluster/mongos-server/logs/1:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

啟動mongos2

docker run --name mongos-server2 -d \ -p 30002:27017 \ --net=mongo-cluster \ --privileged=true \ --entrypoint "mongos" \ -v /tmp/mongo-cluster/mongos-server:/data/configdb \ -v /tmp/mongo-cluster/mongos-server/logs/2:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

啟動mongos3

docker run --name mongos-server3 -d \ -p 30003:27017 \ --net=mongo-cluster \ --privileged=true \ --entrypoint "mongos" \ -v /tmp/mongo-cluster/mongos-server:/data/configdb \ -v /tmp/mongo-cluster/mongos-server/logs/3:/data/logs \ mongo --config /data/configdb/conf/mongo.conf

配置mongos-server1

因為mongos是無中心的配置，所有需要每一臺都需要進行分片配置

進入容器

docker exec -it mongos-server1 /bin/bash mongo -port 27017

登錄Mongos

使用前面設置的root用戶密碼

use admin; db.auth("root","root");

配置分片

進行配置分片信息

sh.addShard("shard1/shard1-server1:27017,shard1-server2:27017,shard1-server3:27017") sh.addShard("shard2/shard2-server1:27017,shard2-server2:27017,shard2-server3:27017") sh.addShard("shard3/shard3-server1:27017,shard3-server2:27017,shard3-server3:27017")

配置mongos-server2

因為mongos是無中心的配置，所有需要每一臺都需要進行分片配置

進入容器

docker exec -it mongos-server2 /bin/bash mongo -port 27017

登錄Mongos

使用前面設置的root用戶密碼

use admin; db.auth("root","root");

配置分片

進行配置分片信息

sh.addShard("shard1/shard1-server1:27017,shard1-server2:27017,shard1-server3:27017") sh.addShard("shard2/shard2-server1:27017,shard2-server2:27017,shard2-server3:27017") sh.addShard("shard3/shard3-server1:27017,shard3-server2:27017,shard3-server3:27017")

配置mongos-server3

因為mongos是無中心的配置，所有需要每一臺都需要進行分片配置

進入容器

docker exec -it mongos-server3 /bin/bash mongo -port 27017

登錄Mongos

使用前面設置的root用戶密碼

use admin; db.auth("root","root");

配置分片

進行配置分片信息

sh.addShard("shard1/shard1-server1:27017,shard1-server2:27017,shard1-server3:27017") sh.addShard("shard2/shard2-server1:27017,shard2-server2:27017,shard2-server3:27017") sh.addShard("shard3/shard3-server1:27017,shard3-server2:27017,shard3-server3:27017")

Docker-compose方式搭建

環境準備

初始化目錄腳本

# 創建config-server 目錄 # 創建配置文件目錄 mkdir -p /tmp/mongo-cluster/config-server/conf # 創建數據文件目錄 mkdir -p /tmp/mongo-cluster/config-server/data/{1..3} # 創建日志文件目錄 mkdir -p /tmp/mongo-cluster/config-server/logs/{1..3}# 創建shard-server 目錄 # 創建配置文件目錄 mkdir -p /tmp/mongo-cluster/shard{1..3}-server/conf # 創建數據文件目錄 mkdir -p /tmp/mongo-cluster/shard{1..3}-server/data/{1..3} # 創建日志文件目錄 mkdir -p /tmp/mongo-cluster/shard{1..3}-server/logs/{1..3}# 創建mongos-server 目錄 # 創建配置文件目錄 mkdir -p /tmp/mongo-cluster/mongos-server/conf # 創建數據文件目錄 mkdir -p /tmp/mongo-cluster/mongos-server/data/{1..3} # 創建日志文件目錄 mkdir -p /tmp/mongo-cluster/mongos-server/logs/{1..3}

生成密鑰文件

# 創建密鑰文件 openssl rand -base64 756 > /tmp/mongo-cluster/config-server/conf/mongo.key # 設置 chmod 600 /tmp/mongo-cluster/config-server/conf/mongo.keycp /tmp/mongo-cluster/config-server/conf/mongo.key /tmp/mongo-cluster/shard1-server/conf/cp /tmp/mongo-cluster/config-server/conf/mongo.key /tmp/mongo-cluster/shard2-server/conf/cp /tmp/mongo-cluster/config-server/conf/mongo.key /tmp/mongo-cluster/shard3-server/conf/cp /tmp/mongo-cluster/config-server/conf/mongo.key /tmp/mongo-cluster/mongos-server/conf/

創建配置文件

echo " # 日志文件 storage:# mongod 進程存儲數據目錄，此配置僅對 mongod 進程有效dbPath: /data/db systemLog:destination: filelogAppend: truepath: /data/logs/mongo.log# 網絡設置 net:port: 27017 #端口號 # bindIp: 127.0.0.1 #綁定ip replication:replSetName: configsvr #副本集名稱 sharding:clusterRole: configsvr # 集群角色，這里配置的角色是配置節點 security:authorization: enabled #是否開啟認證keyFile: /data/configdb/conf/mongo.key #keyFile路徑 " > /tmp/mongo-cluster/config-server/conf/mongo.confecho " # 日志文件 storage:# mongod 進程存儲數據目錄，此配置僅對 mongod 進程有效dbPath: /data/db systemLog:destination: filelogAppend: truepath: /data/logs/mongo.log# 網絡設置 net:port: 27017 #端口號 # bindIp: 127.0.0.1 #綁定ip replication:replSetName: shard1 #復制集名稱是 shardsvr sharding:clusterRole: shardsvr # 集群角色，這里配置的角色是分片節點 security:authorization: enabled #是否開啟認證keyFile: /data/configdb/conf/mongo.key #keyFile路徑 " > /tmp/mongo-cluster/shard1-server/conf/mongo.confecho " # 日志文件 storage:# mongod 進程存儲數據目錄，此配置僅對 mongod 進程有效dbPath: /data/db systemLog:destination: filelogAppend: truepath: /data/logs/mongo.log# 網絡設置 net:port: 27017 #端口號 # bindIp: 127.0.0.1 #綁定ip replication:replSetName: shard2 #復制集名稱是 shard2 sharding:clusterRole: shardsvr # 集群角色，這里配置的角色是分片節點 security:authorization: enabled #是否開啟認證keyFile: /data/configdb/conf/mongo.key #keyFile路徑 " > /tmp/mongo-cluster/shard2-server/conf/mongo.confecho " # 日志文件 storage:# mongod 進程存儲數據目錄，此配置僅對 mongod 進程有效dbPath: /data/db systemLog:destination: filelogAppend: truepath: /data/logs/mongo.log# 網絡設置 net:port: 27017 #端口號 # bindIp: 127.0.0.1 #綁定ip replication:replSetName: shard3 #復制集名稱是 shard3 sharding:clusterRole: shardsvr # 集群角色，這里配置的角色是分片節點 security:authorization: enabled #是否開啟認證keyFile: /data/configdb/conf/mongo.key #keyFile路徑 " > /tmp/mongo-cluster/shard3-server/conf/mongo.confecho " # 日志文件 systemLog:destination: filelogAppend: truepath: /data/logs/mongo.log# 網絡設置 net:port: 27017 #端口號bindIp: 0.0.0.0 #綁定ip # 配置分片，這里面配置的是需要讀取的配置節點的信息 sharding:configDB: configsvr/config-server1:27017,config-server2:27017,config-server3:27017 security:keyFile: /data/configdb/conf/mongo.key #keyFile路徑 " > /tmp/mongo-cluster/mongos-server/conf/mongo.conf

啟動服務

docker-compos配置文件

使用docker-compos方式啟動Docker容器

version: '2' services:config-server1:image: mongocontainer_name: config-server1privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/config-server:/data/configdb- /tmp/mongo-cluster/config-server/data/1:/data/db- /tmp/mongo-cluster/config-server/logs/1:/data/logsconfig-server2:image: mongocontainer_name: config-server2privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/config-server:/data/configdb- /tmp/mongo-cluster/config-server/data/2:/data/db- /tmp/mongo-cluster/config-server/logs/2:/data/logsconfig-server3:image: mongocontainer_name: config-server3privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/config-server:/data/configdb- /tmp/mongo-cluster/config-server/data/3:/data/db- /tmp/mongo-cluster/config-server/logs/3:/data/logsshard1-server1:image: mongocontainer_name: shard1-server1privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/shard1-server:/data/configdb- /tmp/mongo-cluster/shard1-server/data/1:/data/db- /tmp/mongo-cluster/shard1-server/logs/1:/data/logsshard1-server2:image: mongocontainer_name: shard1-server2privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/shard1-server:/data/configdb- /tmp/mongo-cluster/shard1-server/data/2:/data/db- /tmp/mongo-cluster/shard1-server/logs/2:/data/logsshard1-server3:image: mongocontainer_name: shard1-server3privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/shard1-server:/data/configdb- /tmp/mongo-cluster/shard1-server/data/3:/data/db- /tmp/mongo-cluster/shard1-server/logs/3:/data/logsshard2-server1:image: mongocontainer_name: shard2-server1privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/shard2-server:/data/configdb- /tmp/mongo-cluster/shard2-server/data/1:/data/db- /tmp/mongo-cluster/shard2-server/logs/1:/data/logsshard2-server2:image: mongocontainer_name: shard2-server2privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/shard2-server:/data/configdb- /tmp/mongo-cluster/shard2-server/data/2:/data/db- /tmp/mongo-cluster/shard2-server/logs/2:/data/logsshard2-server3:image: mongocontainer_name: shard2-server3privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/shard2-server:/data/configdb- /tmp/mongo-cluster/shard2-server/data/3:/data/db- /tmp/mongo-cluster/shard2-server/logs/3:/data/logsshard3-server1:image: mongocontainer_name: shard3-server1privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/shard3-server:/data/configdb- /tmp/mongo-cluster/shard3-server/data/1:/data/db- /tmp/mongo-cluster/shard3-server/logs/1:/data/logsshard3-server2:image: mongocontainer_name: shard3-server2privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/shard3-server:/data/configdb- /tmp/mongo-cluster/shard3-server/data/2:/data/db- /tmp/mongo-cluster/shard3-server/logs/2:/data/logsshard3-server3:image: mongocontainer_name: shard3-server3privileged: truenetworks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confvolumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/shard3-server:/data/configdb- /tmp/mongo-cluster/shard3-server/data/3:/data/db- /tmp/mongo-cluster/shard3-server/logs/3:/data/logsmongos-server1:image: mongocontainer_name: mongos-server1privileged: trueentrypoint: "mongos"networks:- mongo-cluster-networkcommand: --config /data/configdb/conf/mongo.confports:- "30001:27017"volumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/mongos-server:/data/configdb- /tmp/mongo-cluster/mongos-server/logs/1:/data/logscommand: --config /data/configdb/conf/mongo.confmongos-server2:image: mongocontainer_name: mongos-server2privileged: trueentrypoint: "mongos"networks:- mongo-cluster-networkports:- "30002:27017"volumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/mongos-server:/data/configdb- /tmp/mongo-cluster/mongos-server/logs/2:/data/logscommand: --config /data/configdb/conf/mongo.confmongos-server3:image: mongocontainer_name: mongos-server3privileged: trueentrypoint: "mongos"networks:- mongo-cluster-networkports:- "30003:27017"volumes:- /etc/localtime:/etc/localtime- /tmp/mongo-cluster/mongos-server:/data/configdb- /tmp/mongo-cluster/mongos-server/logs/3:/data/logscommand: --config /data/configdb/conf/mongo.confnetworks:mongo-cluster-network:driver: bridge

啟動服務

docker-compose up -d

初始化文件

執行下面腳本進行容器初始化

docker exec -it config-server1 bash mongo -port 27017 rs.initiate({_id: "configsvr",members: [{ _id : 1, host : "config-server1:27017" },{ _id : 2, host : "config-server2:27017" },{ _id : 3, host : "config-server3:27017" }]} ) use admin db.createUser({user:"root",pwd:"root",roles:[{role:'root',db:'admin'}]}) db.auth("root","root") db.createUser({user:"test",pwd:"test",roles:[{role:'readWrite',db:'test'}]})docker exec -it shard1-server1 bin/bash mongo -port 27017 #進行副本集配置 rs.initiate({_id : "shard1",members: [{ _id : 0, host : "shard1-server1:27017" },{ _id : 1, host : "shard1-server2:27017" },{ _id : 2, host : "shard1-server3:27017",arbiterOnly:true }]} ); use admin db.createUser({user:"root",pwd:"root",roles:[{role:'root',db:'admin'}]}) db.auth("root","root") db.createUser({user:"test",pwd:"test",roles:[{role:'readWrite',db:'test'}]})docker exec -it shard2-server1 bin/bash mongo -port 27017 #進行副本集配置 rs.initiate({_id : "shard2",members: [{ _id : 0, host : "shard2-server1:27017" },{ _id : 1, host : "shard2-server2:27017" },{ _id : 2, host : "shard2-server3:27017",arbiterOnly:true }]} ); use admin db.createUser({user:"root",pwd:"root",roles:[{role:'root',db:'admin'}]}) db.auth("root","root") db.createUser({user:"test",pwd:"test",roles:[{role:'readWrite',db:'test'}]})docker exec -it shard3-server1 bin/bash mongo -port 27017 #進行副本集配置 rs.initiate({_id : "shard3",members: [{ _id : 0, host : "shard3-server1:27017" },{ _id : 1, host : "shard3-server2:27017" },{ _id : 2, host : "shard3-server3:27017",arbiterOnly:true }]} ); use admin db.createUser({user:"root",pwd:"root",roles:[{role:'root',db:'admin'}]}) db.auth("root","root") db.createUser({user:"test",pwd:"test",roles:[{role:'readWrite',db:'test'}]})

初始化分片

docker exec -it mongos-server1 /bin/bash mongo -port 27017 use admin; db.auth("root","root"); sh.addShard("shard1/shard1-server1:27017,shard1-server2:27017,shard1-server3:27017") sh.addShard("shard2/shard2-server1:27017,shard2-server2:27017,shard2-server3:27017") sh.addShard("shard3/shard3-server1:27017,shard3-server2:27017,shard3-server3:27017")docker exec -it mongos-server2 /bin/bash mongo -port 27017 use admin; db.auth("root","root"); sh.addShard("shard1/shard1-server1:27017,shard1-server2:27017,shard1-server3:27017") sh.addShard("shard2/shard2-server1:27017,shard2-server2:27017,shard2-server3:27017") sh.addShard("shard3/shard3-server1:27017,shard3-server2:27017,shard3-server3:27017")docker exec -it mongos-server3 /bin/bash mongo -port 27017 use admin; db.auth("root","root"); sh.addShard("shard1/shard1-server1:27017,shard1-server2:27017,shard1-server3:27017") sh.addShard("shard2/shard2-server1:27017,shard2-server2:27017,shard2-server3:27017") sh.addShard("shard3/shard3-server1:27017,shard3-server2:27017,shard3-server3:27017")

專注Java技術干貨分享，歡迎志同道合的小伙伴，一起交流學習

總結

以上是生活随笔為你收集整理的【超详细】手把手教你搭建MongoDB集群搭建的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。