mongodb分片集群配置

本文涉及的产品
云数据库 MongoDB,通用型 2核4GB
简介:

mkdir /usr/local/mongodb/etc

mkdir /usr/local/mongodb/data

mkdir /usr/local/mongodb/logs

mkdir /usr/local/mongodb/pid



1、安装软件

tar zxvf mongodb-linux-x86_64-rhel62-3.0.2.tgz && mv mongodb-linux-x86_64-rhel62-3.0.2/* /usr/local/mongodb/

2、创建mongodb数据实例配置文件,以端口区分配置文件

dbpath=/usr/local/mongodb/data/21000

logpath=/usr/local/mongodb/logs/21000.log

pidfilepath=/usr/local/mongodb/pid/21000.pid

directoryperdb=true

logappend=true

replSet=peiwo

port=21000

oplogSize=100

fork=true

noprealloc=true

启动:

/usr/local/mongodb/bin/mongod -f /usr/local/mongodb/etc/data21000.conf




3、创建mongodb配置服务器,存储所有数据库元信息(路由、分片)的配置,以端口区分配置文件

dbpath=/usr/local/mongodb/data/22000

logpath=/usr/local/mongodb/logs/22000.log

pidfilepath=/usr/local/mongodb/pid/22000.pid

directoryperdb=true

logappend=true

port=22000

oplogSize=100

fork=true

noprealloc=true

configsvr=true


启动:

/usr/local/mongodb/bin/mongod -f /usr/local/mongodb/etc/configsvr22000.conf

/usr/local/mongodb/bin/mongod --configsvr --dbpath /usr/local/mongodb/data/22002 --port 22002 --fork --logpath /usr/local/mongodb/logs/22002.log


4、启动路由节点

/usr/local/mongodb/bin/mongos --configdb 10.144.8.86:22000,10.144.8.86:22001,10.144.8.86:22002 --port 20000 --fork --logpath /usr/local/mongodb/logs/configdb.log


5、配置Replica Set副本集

/usr/local/mongodb/bin/mongo 10.163.111.142:7000   #ip和port是某个节点的地址


use admin


replcfg={ _id:"peiwo", members:[ {_id:0,host:'10.163.111.142:21000',priority:2}, {_id:1,host:'10.163.111.142:21001',priority:1}, {_id:2,host:'10.163.111.142:21002',arbiterOnly:true}] };


rs.initiate(replcfg)             #使配置生效


rs.status()  #查看副本集状态


db.getMongo().setSlaveOk(); #mongodb默认是从主节点读写数据的,副本节点上不允许读,需要设置副本节点可以读。


6、配置Sharding

/usr/local/mongodb/bin/mongo 10.144.8.86:20000   #这里必须连接路由节点

use admin

>sh.addShard("peiwo/10.163.111.142:21000") #test表示replica set的名字 当把主节点添加到shard以后,会自动找到set里的主,备,决策节点  

>db.runCommand({enableSharding:"peiwotestdb"})    #diameter_test is database name  

>db.runCommand( { shardCollection: "peiwotestdb.peiwotable",key:{"_id":1}})  


第一个命令很容易理解,第二个命令是对需要进行Sharding的数据库进行配置,第三个命令是对需要进行Sharding的Collection进行配置,这里的dcca_dccr_test即为Collection的名字。另外还有个key,这个是比较关键的东西,对于查询效率会有很大的影响,具体可以查看Shard Key Overview

到这里Sharding也已经搭建完成了,以上只是最简单的搭建方式,其中某些配置仍然使用的是默认配置。如果设置不当,会导致效率异常低下,所以建议大家多看看官方文档再进行默认配置的修改。







     本文转自aaron428 51CTO博客,原文链接:http://blog.51cto.com/aaronsa/1741513,如需转载请自行联系原作者

相关实践学习
MongoDB数据库入门
MongoDB数据库入门实验。
快速掌握 MongoDB 数据库
本课程主要讲解MongoDB数据库的基本知识,包括MongoDB数据库的安装、配置、服务的启动、数据的CRUD操作函数使用、MongoDB索引的使用(唯一索引、地理索引、过期索引、全文索引等)、MapReduce操作实现、用户管理、Java对MongoDB的操作支持(基于2.x驱动与3.x驱动的完全讲解)。 通过学习此课程,读者将具备MongoDB数据库的开发能力,并且能够使用MongoDB进行项目开发。   相关的阿里云产品:云数据库 MongoDB版 云数据库MongoDB版支持ReplicaSet和Sharding两种部署架构,具备安全审计,时间点备份等多项企业能力。在互联网、物联网、游戏、金融等领域被广泛采用。 云数据库MongoDB版(ApsaraDB for MongoDB)完全兼容MongoDB协议,基于飞天分布式系统和高可靠存储引擎,提供多节点高可用架构、弹性扩容、容灾、备份回滚、性能优化等解决方案。 产品详情: https://www.aliyun.com/product/mongodb
相关文章
|
4月前
|
NoSQL 网络协议 Unix
第6期 MongoDB配置启动方式
第6期 MongoDB配置启动方式
296 0
|
6月前
|
存储 NoSQL MongoDB
mongodb 存引擎及配置
mongodb 存引擎及配置
|
5月前
|
存储 JSON 分布式计算
MongoDB【部署 01】mongodb最新版本6.0.5安装部署配置使用及mongodb-shell1.8.0安装使用(云盘分享安装文件)
MongoDB【部署 01】mongodb最新版本6.0.5安装部署配置使用及mongodb-shell1.8.0安装使用(云盘分享安装文件)
171 0
|
12天前
|
存储 负载均衡 NoSQL
MongoDB分片技术:实现水平扩展的利器
【4月更文挑战第30天】MongoDB的分片技术是应对数据增长和复杂业务需求的解决方案,它将数据水平拆分存储在多个实例上,实现数据库的水平扩展。分片带来水平扩展性、负载均衡、高可用性和灵活的数据管理。分片工作涉及mongos路由进程、config server和shard实例。设置分片包括部署配置服务器、添加分片、启动mongos、配置分片键和开始分片。选择合适的分片键和有效管理能确保系统性能和稳定性。
|
6月前
|
NoSQL Linux MongoDB
MongoDB配置用户名和密码
MongoDB配置用户名和密码
490 0
|
1天前
|
NoSQL 算法 测试技术
【MongoDB 专栏】MongoDB 的自动分片与手动分片
【5月更文挑战第11天】MongoDB的分片技术在处理大规模数据和高并发场景中至关重要,提供自动和手动两种方式。自动分片基于预定义规则,简化管理,适合大部分场景,但灵活性有限。手动分片则允许用户自定义策略,实现高效布局,适用于有特殊需求的应用,但配置复杂。选择分片方式需考虑业务需求、数据特点和技术能力。正确实施分片策略能构建高性能、可扩展的系统,支持企业业务发展。随着技术进步,未来的分片技术将更加智能和易用。
【MongoDB 专栏】MongoDB 的自动分片与手动分片
|
3天前
|
监控 NoSQL 安全
【MongoDB 专栏】MongoDB 的复制集:高可用性配置
【5月更文挑战第10天】MongoDB的复制集是实现数据高可用性的重要机制,由主节点和次节点构成,主节点处理写操作,次节点同步数据确保一致。在主节点故障时,次节点自动提升接替,保证服务不间断。通过复制集,可实现数据保护、持续服务,适用于关键业务系统和数据备份。配置时需关注网络稳定性、节点性能和数据一致性。案例显示,复制集能有效保障服务高可用,防止数据丢失和业务中断,是现代数据库管理的关键工具。在数据驱动的世界,复制集为高可用性提供了坚实保障。
【MongoDB 专栏】MongoDB 的复制集:高可用性配置
|
3天前
|
存储 监控 NoSQL
【MongoDB 专栏】MongoDB 分片策略与最佳实践
【5月更文挑战第10天】MongoDB 分片是应对大数据量的扩展策略,涉及哈希和范围分片两种策略。分片架构包含分片服务器、配置服务器和路由服务器。最佳实践包括选择合适分片键、监控调整、避免热点数据等。注意数据分布不均和跨分片查询的挑战。通过实例展示了如何在电商场景中应用分片。文章旨在帮助理解并优化 MongoDB 分片使用。
【MongoDB 专栏】MongoDB 分片策略与最佳实践
|
13天前
|
DataWorks NoSQL 关系型数据库
DataWorks操作报错合集之在使用 DataWorks 进行 MongoDB 同步时遇到了连通性测试失败,实例配置和 MongoDB 白名单配置均正确,且同 VPC 下 MySQL 可以成功连接并同步,但 MongoDB 却无法完成同样的操作如何解决
DataWorks是阿里云提供的一站式大数据开发与治理平台,支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中,可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
30 1
|
2月前
|
NoSQL MongoDB
搭建MongoDB分片式集群
搭建MongoDB分片式集群
20 0