mongodb复制集windows server部署,以及将线上单节点转化成复制集所踩的坑

本文涉及的产品
云数据库 MongoDB,独享型 2核8GB
推荐场景:
构建全方位客户视图
日志服务 SLS,月写入数据量 50GB 1个月
简介: 安装完成后我们需要启动三个mongod的服务来做为复制集的三个节点,我们可以直接打开cmd,使用mongod来根据不同的配置启动服务。例如:参考如下四张图,由于我安装的磁盘足够存放mongodb的数据,所以我将数据放在data文件中,三个节点的配置文件放在config文件中,三个节点mongod的服务日志放在log中。

部署

mongodb安装就不多介绍了。可以参考:https://blog.csdn.net/Chenftli/article/details/105228130

安装完成后我们需要启动三个mongod的服务来做为复制集的三个节点,我们可以直接打开cmd,使用mongod来根据不同的配置启动服务。例如:参考如下四张图,由于我安装的磁盘足够存放mongodb的数据,所以我将数据放在data文件中,三个节点的配置文件放在config文件中,三个节点mongod的服务日志放在log中。
在这里插入图片描述
分别将三个节点的数据放在data的db1、db2、db3中。
在这里插入图片描述
分别将三个节点的mongod日志放在log的db1、db2、db3中。
在这里插入图片描述

再分别把配置文件放到config中的db1、db2、db3中。
在这里插入图片描述
mongod.cfg文件可以在bin目录下拷贝过来。
在这里插入图片描述
下面为mongod.cfg的配置内容, 三个配置文件的不同在于dbPath、systemLog的path、net的port的分别改成对应的内容,参数的意义在下面注释中。

# mongod.conf

# Where and how to store data.
storage:
  # dbPath为当前节点数据存储的路径
  dbPath: D:\Program Files\MongoDB\Server\4.2\data\db1
  # journal的enabled为是否开启日志
  journal:
    enabled: true
# 这部分的配置很重要,直接影响到内存的占用,cacheSizeGB为当前节点的
# monggo服务需要占用服务器内存的大小,cacheSizeGB大小的配置请查看
# 下面泪的部分
  wiredTiger:
    engineConfig:
      cacheSizeGB: 5

# mongod日志文件的配置,mongodb服务出现问题可以查看此日志
systemLog:
  destination: file
  logAppend: true
  path:  D:\Program Files\MongoDB\Server\4.2\log\db1\mongod.log

# network interfaces,port为此mongo节点的开放的端口,
# bindIp为开放访问的Ip,0.0.0.0意思是任意Ip地址都可访问,
# 这就涉及到权限问题,你也可以只设置需要访问此mongo节点的ip
net:
  port: 27017
  bindIp: 0.0.0.0

# 安全配置的权限认证开启
security:
  authorization: enabled
  # 如果节点在不同的服务器上开启了认证,则需要使用keyfile去认证,并在下面路径的目录中创建rs0.key文件
  keyFile: D:\Program Files\MongoDB\Server\4.2\keyfile\rs0.key

# 复制集配置,replSetName所属
replication:
  replSetName: rs0

更多配置内容请参考官方文档:http://docs.mongodb.org/manual/reference/configuration-options/

使用如下命令来逐个启动mongod服务(注意修改配置文件路径以及服务名,分成三个cmd窗口启动)

mongod --config "D:\Program Files\MongoDB\Server\4.2\config\db1\mongod.cfg" --serviceName "MongoDB1" --serviceDisplayName "MongoDB1" --install

使用下面命令进入一个mongo的服务:

mongo -p 27017

执行下面命令将mongo的三个服务节点挂载到rs0的复制集下

config = {
    "_id" : "rs0",
    "members": [
        { "_id" : 0, "host" : "127.0.0.1:27017" },
        { "_id" : 1, "host" : "127.0.0.1:27018" },
        { "_id" : 2, "host" : "127.0.0.1:27019" }
    ]
}
rs.initiate(config)

此时一个复制集部署完成。

总结:

三个复制集的节点可以部署到不同的服务器上,步骤差不多,可能需要你关注防火墙是否开启,如果开启,要在入站规则配置端口开放。
还有如果开启了认证机制,不同节点需要在配置中的security:中添加下面一行配置:

keyFile: D:\Program Files\MongoDB\Server\4.2\keyfile\rs0.key

泪:

我的坑:线上的服务器是单节点mongo,想要改成复制集,但只有一台服务器,所以我要把三个mongodb服务部署在同一台服务器,由于之前的mongo有50多G的数据,改成复制集后,数据同步时把服务器内存撑爆。

原因:由于没有设置mongo的缓存cacheSizeGB的值,默认会使用服务器内存的60%,原来一个mongo服务, 现在三个mongo服务,三个节点在同步数据是产生大量缓存,内存得不到释放,会将服务器的内存撑满。
根据服务器内存大小,以及mongo服务占用多少内存资源,设置合理的值,
一般会设置cacheSizeGB*0.6 = mongo服务占用多少内存

其他问题:

下面问题是在设置仲裁节点时出现的

"errmsg" : "This node, 127.0.0.1:27017, with id MemberId(0) is not electable under the new configura

此问题的原因是:仲裁不能和初始化在同一台服务器,所以如果要设置仲裁节点则需要将一个Mongo的服务节点放到另外的服务器上,并将此节点在初始化时候的服务器上设置为仲裁节点。

相关实践学习
MongoDB数据库入门
MongoDB数据库入门实验。
快速掌握 MongoDB 数据库
本课程主要讲解MongoDB数据库的基本知识,包括MongoDB数据库的安装、配置、服务的启动、数据的CRUD操作函数使用、MongoDB索引的使用(唯一索引、地理索引、过期索引、全文索引等)、MapReduce操作实现、用户管理、Java对MongoDB的操作支持(基于2.x驱动与3.x驱动的完全讲解)。 通过学习此课程,读者将具备MongoDB数据库的开发能力,并且能够使用MongoDB进行项目开发。   相关的阿里云产品:云数据库 MongoDB版 云数据库MongoDB版支持ReplicaSet和Sharding两种部署架构,具备安全审计,时间点备份等多项企业能力。在互联网、物联网、游戏、金融等领域被广泛采用。 云数据库MongoDB版(ApsaraDB for MongoDB)完全兼容MongoDB协议,基于飞天分布式系统和高可靠存储引擎,提供多节点高可用架构、弹性扩容、容灾、备份回滚、性能优化等解决方案。 产品详情: https://www.aliyun.com/product/mongodb
目录
相关文章
|
3天前
|
监控 安全 网络安全
Windows Server管理:配置与管理技巧
Windows Server管理:配置与管理技巧
19 3
|
7天前
|
存储 安全 网络安全
Windows Server 本地安全策略
由于广泛使用及历史上存在的漏洞,Windows服务器成为黑客和恶意行为者的主要攻击目标。这些系统通常存储敏感数据并支持关键服务,因此组织需优先缓解风险,保障业务的完整性和连续性。常见的威胁包括勒索软件、拒绝服务攻击、内部威胁、恶意软件感染等。本地安全策略是Windows操作系统中用于管理计算机本地安全性设置的工具,主要包括用户账户策略、安全选项、安全设置等。实施强大的安全措施,如定期补丁更新、网络分段、入侵检测系统、数据加密等,对于加固Windows服务器至关重要。
|
7天前
|
存储 NoSQL MongoDB
【赵渝强老师】部署MongoDB复制集
本文介绍了如何在单个节点上搭建MongoDB复制集环境,通过监听不同端口实现多节点配置。详细步骤包括创建数据目录、编辑配置文件、启动节点、初始化复制集、查看状态以及测试主从库的读写操作。文中还提供了视频讲解和代码示例,帮助读者更好地理解和操作。
|
7天前
|
存储 NoSQL MongoDB
【赵渝强老师】MongoDB复制集的体系架构
MongoDB的复制集是一种集群技术,由一个Primary节点和多个Secondary节点组成,实现数据的高可用性。Primary节点处理写入请求,Secondary节点同步数据。当Primary节点故障时,Secondary节点可通过选举成为新的Primary节点。视频讲解和示意图详见正文。
|
1月前
|
数据安全/隐私保护 Windows
安装 Windows Server 2019
安装 Windows Server 2019
|
1月前
|
网络协议 Windows
Windows Server 2019 DHCP服务器搭建
Windows Server 2019 DHCP服务器搭建
|
1月前
|
NoSQL Shell MongoDB
Windows 平台安装 MongoDB
10月更文挑战第10天
39 0
Windows 平台安装 MongoDB
|
1月前
|
网络协议 定位技术 Windows
Windows Server 2019 DNS服务器搭建
Windows Server 2019 DNS服务器搭建
|
1月前
|
安全 网络协议 数据安全/隐私保护
Windows Server 2019 搭建并加入域
Windows Server 2019 搭建并加入域
|
1月前
|
网络协议 文件存储 Windows
Windows Server 2019 FTP服务器搭建
Windows Server 2019 FTP服务器搭建