MongoDB分片部署(windows)

OS:win10

MongoDB:4.4.24

伪分布式

从图中可以看出,分片集群中主要由三个部分组成,即分片服务器( Shard )、路由服务器
( Mongos )以及配置服务器( Config Server )组成。其中,分片服务器有三个,即 Shard1 、
Shard2 、 Shard3 ;路由服务器有两个,即 Mongos1 和 Mongos2 ;配置服务器有三个,即主、副、副。

主要有如下所述三个主要组件:
Shard: 用于存储实际的数据块,实际生产环境中一个shard server 角色可由几台机器组个一个 replica set 承担,防止主机单点故障
Config Server: mongod实例,存储了整个 ClusterMetadata ,其中包括 chunk 信息。
Query Routers: 前端路由,客户端由此接入,且让整个集群看上去像单一数据库,前端应用可以透明使用。

部署分片集群

部署shard

部署两个shard分片块,数据存储的地方。

步骤一:环境准备
分片 节点(实例) 端口 路径
1 shard11(主) 4006

dbpath:D:\shard1\shard11\data

logpath:D:\shard1\shard11\log

shard12(从) 4007

dbpath:D:\shard1\shard12\data

logpath:D:\shard1\shard12\log

2 shard21(主) 4008

dbpath:D:\shard2\shard21\data

logpath:D:\shard2\shard21\log

shard22(从) 4009

dbpath:D:\shard2\shard22\data

logpath:D:\shard2\shard22\log

每一个分片都应该安装 MongoDB 实例,需要将 bin 文件复制到每个分片中, 并且创建data 文件以及 log 文件存放数据库数据和日志数据。比如:

每个shard里面包含两个实例,一主一从。比如:

另外一个也是一样的

步骤二 启动分片服务(实例)

启动分片集群shard1(shard11和shard12)
shard11

然后进入数据库bin目录中,启动cmd

点击回车

(注意:有些电脑需要更高的权限,需要以管理员的身份运行cmd)

看图:我们可以打开菜单,找到Windows 系统,然后找到命令提示符,右键鼠标,点击更多,然后以管理员的身份运行。

(然后我们需要切换到需要打开的文件夹的数据库bin目录

比如这个:

然后输入

\bin>mongod --shardsvr --replSet shard1 -port 4006 -dbpath D:\shard1\shard11\data -logpath D:\shard1\shard11\log\shard11.log  

比如: 

shard12:

再次进入数据库bin目录中,启动cmd

bin>mongod --shardsvr --replSet shard1 -port 4007 -dbpath D:\shard1\shard12\data -logpath D:\shard1\shard12\log\shard12.log

--shardsvr 为分片声明

当命令一直保持运行状态则说明服务运行成功,此服务为一次性服务,不要关闭此窗口,最小化即可。

启动分片集群2(shard21和shard22)
shard21

\bin>mongod --shardsvr --replSet shard2 -port 4008 -dbpath D:\shard2\shard21\data -logpath D:\shard2\shard21\log\shard21.log

如图所示: 

shard22

\bin>mongod --shardsvr --replSet shard2 -port 4009 -dbpath D:\shard2\shard22\data -logpath D:\shard2\shard22\log\shard22.log

如图所示:  

注意:启动服务均为一次性服务,关闭 cmd 即为关闭服务,所以在未完成前,请勿关闭。

 步骤三:配置分片(shard1和shard2)集群

我们通过mongo -port 4006(端口)进入4006端口

然后进入到shard1集群任何一个节点中

use admin
 
config={_id:"shard1",members:[
... {_id:0,host:"localhost:4006",priority:2},
... {_id:1,host:"localhost:4007",priority:1}
... ]}
 
 
 rs.initiate(config)

如图所示: 

进入到shard2集群何一个节点中

use admin
 
config={_id:"shard2",members:[
... {_id:0,host:"localhost:4008",priority:2},
... {_id:1,host:"localhost:4009",priority:1}
... ]}
 
 
 rs.initiate(config)

同上

可以通过rs.status()查看集群的状态

部署config server

步骤一:环境准备

注意:在 MongoDB 3.4 版本后 config 服务必须配置为 副本集,这里设置为一主一从。

config实例 端口 数据路径 日志路径
config1(主) 4002 D:\config\config1\data D:\config\config1\log
config2(从) 4003 D:\config\config2\data D:\config\config2\log

和上面步骤一相同,先建一个config文件夹,需要将 bin 文件复制到每个分片中,然后建config1,config2文件夹两个,每个文件夹添加data和log。

步骤二:启动config server
启动config1

进入到config1的bin目录中,启动cmd

\bin>mongod --configsvr --replSet confset -port 4002 -dbpath D:\config\config1\data -logpath D:\config\config1\log\conf1.log

 

 注意:--configsvr 这里我们完全可以像启动普通 mongodb 服务一样启动,不需要添加 —shardsvr 和 configsvr 参数。因为这两个参数的作用就是改变启动端口的,所以我们自行指定了端口就可以。

启动config2

\bin>mongod --configsvr --replSet confset -port 4003 -dbpath D:\config\config2\data -logpath D:\config\config2\log\conf2.log
 

 

注意!!!一定不要关闭任何 cmd 窗口,最小化即可。

步骤三:配置config server集群

进入任何一个配置服务器的节点初始化配置服务器的群集

比如:mongo -port 4002

然后:

 use admin
 
 
 config={_id:"confset",configsvr:true,members:[
... {_id:0,host:"localhost:4002"},
... {_id:1,host:"localhost:4003"}
... ]}
 
 
 rs.initiate(config)

比如:

可以通过rs.status()查看集群的状态。

部署路由服务器 Route Process

可以创建专门的文件夹存放日志


再进入 数据库 bin 目录中 启动 cmd

D:\MongoDB\bin>mongos --configdb confset/localhost:4002,localhost:4003 -logpath D:\mongos\log\mongos.log -port 4000 

  mongos :mongos 就是一个路由服务器,它会根据管理员设置的 “ 片键 ” 将数据分摊到自己管理的mongod 集群,数据和片的对应关系以及相应的配置信息保存在 "config 服务器 " 上。

配置分片信息

bin 目录下使用 MongoDB Shell 登录到 mongos ,添加 Shard 节点

mongos> sh.addShard("shard1/localhost:4006,localhost:4007")

mongos> sh.addShard("shard2/localhost:4008,localhost:4009")

测试分片

登入路由(4000) 端口

指定要分片的数据库,以下指令指定分片数据库为test

mongos> sh.enableSharding("test")

指定数据库里需要分片的集合和片键,片键根据实际情况选择 

 mongos> sh.shardCollection("test.c1",{"id":"hashed"})

上述指令指定分片集合为c1,分片字段为“id”,分片形式是哈希分片,若改成“1”则为范围分片

如果集合已经包含数据,则必须在分片集合之前创建一个支持分片键的索引,如果集合为空,则

mongodb 将创建索引。

插入10000条数据验证,数据必须包含分片键:id

mongos> for(var i=1;i<=10000;i++){
... db.c1.save({id:i,name:"a"+i,age:i});}

 

查看分片状态

 输入sh.status()  查看分片集群状态

两个shard都有数据分布,说明分片成功啦!

robo 3T查看分片集

连接两个 shard 端口查看分片情况,若两个shard中的数据不同,则说明分片成功啦!

shard1--4006端口中的数据存储,查看c2集合中的数据,可见分片键id的分布情况。

相关推荐

  1. MongoDB部署模式分析

    2024-06-07 01:30:01       27 阅读
  2. MongoDB 部署分片集群

    2024-06-07 01:30:01       24 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-06-07 01:30:01       98 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-06-07 01:30:01       106 阅读
  3. 在Django里面运行非项目文件

    2024-06-07 01:30:01       87 阅读
  4. Python语言-面向对象

    2024-06-07 01:30:01       96 阅读

热门阅读

  1. WEB三大主流框架之Vue.js

    2024-06-07 01:30:01       27 阅读
  2. 黑马es数据同步mq解决方案

    2024-06-07 01:30:01       21 阅读
  3. 如何快速入门使用Vue.js

    2024-06-07 01:30:01       32 阅读
  4. 在Linux/Ubuntu/Debian系统中使用 `tar` 压缩文件

    2024-06-07 01:30:01       26 阅读
  5. Attention as an RNN

    2024-06-07 01:30:01       29 阅读
  6. 【C++】C++程序的四个区和智能指针的实现

    2024-06-07 01:30:01       34 阅读
  7. AWS需要实名吗?

    2024-06-07 01:30:01       28 阅读