热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

MongoDB高可用集群搭建指南:分片、读写分离与负载均衡

本文详细介绍了如何搭建一个高可用的MongoDB集群,包括环境准备、用户配置、目录创建、MongoDB安装、配置文件设置、集群组件部署等步骤。特别关注分片、读写分离及负载均衡的实现。

本文将指导您完成一个高可用MongoDB集群的搭建,涵盖分片、读写分离和负载均衡的关键技术点。

首先,我们需要准备环境并配置用户:
1. 创建一个用于运行MongoDB的非root用户,例如chiansun:
useradd chiansun
2. 设置该用户的密码:
echo '123456' | passwd --stdin chiansun
3. 将新用户加入sudoers列表,以便执行管理员命令:
echo 'chiansun ALL=(ALL) NOPASSWD:ALL' > /etc/sudoers.d/chiansun
chmod 0440 /etc/sudoers.d/chiansun
4. 确保用户可以在无终端的情况下使用sudo,编辑/etc/sudoers文件,注释掉Default requiretty行:
sudo sed -i 's/^%wheel.*requiretty/# %wheel.*requiretty/g' /etc/sudoers
5. 创建MongoDB的工作目录,并分配正确的权限:
mkdir /mongo
chown -R chiansun:chiansun /mongo

接下来,配置MongoDB的yum源以简化安装过程:
cat >> /etc/yum.repos.d/mongodb-org-3.4.repo <[mongodb-org-3.4]
name=MongoDB Repository
baseurl=https://repo.mongodb.org/yum/redhat/$releasever/mongodb-org/3.4/x86_64/
gpgcheck=1
enabled=1
gpgkey=https://www.mongodb.org/static/pgp/server-3.4.asc
EOF

为了确保系统安全性和兼容性,还需要关闭SELinux:
sed -i 's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config
然后重启系统使更改生效:
reboot

在所有参与集群构建的节点上重复上述步骤后,开始安装MongoDB:
sudo yum install -y mongodb-org

根据集群设计,我们将部署多个mongos(路由服务器)、config server(配置服务器)以及shard server(分片服务器)。每个shard server将配置为复制集,以提高数据的可靠性和读取性能。

对于每个config server,创建必要的目录结构:
mkdir -p /mongo/config/{log,data,run}
然后编辑mongod.conf配置文件,指定日志路径、数据库存储路径、端口等信息:
cat >> /mongo/config/mongod.conf <systemLog:
destination: file
logAppend: true
path: /mongo/config/log/mongod.log
storage:
dbPath: /mongo/config/data
journal:
enabled: true
processManagement:
fork: true
pidFilePath: /mongo/config/run/mongod.pid
net:
port: 27100
replication:
replSetName: config
sharding:
clusterRole: configsvr
EOF

启动config server:
mongod --config /mongo/config/mongod.conf
通过Mongo shell初始化配置服务器的复制集:
mongo --port 27100
cOnfig= {_id: 'config', members: [{_id: 0, host: '192.168.1.11:27100'}, {_id: 1, host: '192.168.1.12:27100'}, {_id: 2, host: '192.168.1.13:27100'}]}
rs.initiate(config)
检查复制集的状态:
rs.status()

对于每个shard server,同样需要创建目录结构、编辑配置文件并启动服务。例如,对于shard1:
mkdir -p /mongo/shard1/{log,data,run}
cat >> /mongo/shard1/mongod.conf <systemLog:
destination: file
logAppend: true
path: /mongo/shard1/log/mongod.log
storage:
dbPath: /mongo/shard1/data
journal:
enabled: true
processManagement:
fork: true
pidFilePath: /mongo/shard1/run/mongod.pid
net:
port: 27001
replication:
replSetName: shard1
sharding:
clusterRole: shardsvr
EOF

mongod --config /mongo/shard1/mongod.conf
通过Mongo shell初始化shard1的复制集:
mongo --port 27001
use admin
cOnfig= {_id: 'shard1', members: [{_id: 0, host: '192.168.1.11:27001'}, {_id: 1, host: '192.168.1.12:27001'}, {_id: 2, host: '192.168.1.13:27001'}]}
rs.initiate(config)
rs.status()

重复上述步骤为shard2和shard3配置相同的设置,但需调整端口号和复制集名称。

最后,配置mongos路由服务器:
mkdir -p /mongo/mongos/{log,data,run}
cat >> /mongo/mongos/mongod.conf <systemLog:
destination: file
logAppend: true
path: /mongo/mongos/log/mongod.log
processManagement:
fork: true
pidFilePath: /mongo/mongos/run/mongod.pid
net:
port: 27200
sharding:
configDB: config/192.168.1.11:27100,192.168.1.12:27100,192.168.1.13:27100
EOF

mongos --config /mongo/mongos/mongod.conf
连接到mongos实例,添加分片并启用分片功能:
mongo --port 27200
sh.addShard('shard1/192.168.1.11:27001,192.168.1.12:27001,192.168.1.13:27001')
sh.addShard('shard2/192.168.1.12:27002,192.168.1.13:27002,192.168.1.11:27002')
sh.addShard('shard3/192.168.1.13:27003,192.168.1.11:27003,192.168.1.12:27003')
启用特定数据库的分片:
db.runCommand({enablesharding: 'bike'})
对特定集合应用分片策略:
db.runCommand({shardcollection: 'bike.users', key: {_id: 'hashed'}})


推荐阅读
  • 本文深入探讨了Linux系统中网卡绑定(bonding)的七种工作模式。网卡绑定技术通过将多个物理网卡组合成一个逻辑网卡,实现网络冗余、带宽聚合和负载均衡,在生产环境中广泛应用。文章详细介绍了每种模式的特点、适用场景及配置方法。 ... [详细]
  • 本文详细介绍如何使用Python进行配置文件的读写操作,涵盖常见的配置文件格式(如INI、JSON、TOML和YAML),并提供具体的代码示例。 ... [详细]
  • 数据管理权威指南:《DAMA-DMBOK2 数据管理知识体系》
    本书提供了全面的数据管理职能、术语和最佳实践方法的标准行业解释,构建了数据管理的总体框架,为数据管理的发展奠定了坚实的理论基础。适合各类数据管理专业人士和相关领域的从业人员。 ... [详细]
  • UNP 第9章:主机名与地址转换
    本章探讨了用于在主机名和数值地址之间进行转换的函数,如gethostbyname和gethostbyaddr。此外,还介绍了getservbyname和getservbyport函数,用于在服务器名和端口号之间进行转换。 ... [详细]
  • 本文详细介绍了Java中org.neo4j.helpers.collection.Iterators.single()方法的功能、使用场景及代码示例,帮助开发者更好地理解和应用该方法。 ... [详细]
  • 优化ListView性能
    本文深入探讨了如何通过多种技术手段优化ListView的性能,包括视图复用、ViewHolder模式、分批加载数据、图片优化及内存管理等。这些方法能够显著提升应用的响应速度和用户体验。 ... [详细]
  • 本文将介绍如何编写一些有趣的VBScript脚本,这些脚本可以在朋友之间进行无害的恶作剧。通过简单的代码示例,帮助您了解VBScript的基本语法和功能。 ... [详细]
  • 本文详细介绍了如何在Linux系统上安装和配置Smokeping,以实现对网络链路质量的实时监控。通过详细的步骤和必要的依赖包安装,确保用户能够顺利完成部署并优化其网络性能监控。 ... [详细]
  • CentOS7源码编译安装MySQL5.6
    2019独角兽企业重金招聘Python工程师标准一、先在cmake官网下个最新的cmake源码包cmake官网:https:www.cmake.org如此时最新 ... [详细]
  • 本文详细介绍了 Dockerfile 的编写方法及其在网络配置中的应用,涵盖基础指令、镜像构建与发布流程,并深入探讨了 Docker 的默认网络、容器互联及自定义网络的实现。 ... [详细]
  • 本文介绍了一款用于自动化部署 Linux 服务的 Bash 脚本。该脚本不仅涵盖了基本的文件复制和目录创建,还处理了系统服务的配置和启动,确保在多种 Linux 发行版上都能顺利运行。 ... [详细]
  • 如何配置Unturned服务器及其消息设置
    本文详细介绍了Unturned服务器的配置方法和消息设置技巧,帮助用户了解并优化服务器管理。同时,提供了关于云服务资源操作记录、远程登录设置以及文件传输的相关补充信息。 ... [详细]
  • MQTT技术周报:硬件连接与协议解析
    本周开发笔记重点介绍了在新项目中使用MQTT协议进行硬件连接的技术细节,涵盖其特性、原理及实现步骤。 ... [详细]
  • MongoDB集群配置:副本集与分片详解
    本文详细介绍了如何在MongoDB中配置副本集(Replica Sets)和分片(Sharding),并提供了具体的步骤和命令,帮助读者理解并实现高可用性和水平扩展的MongoDB集群。 ... [详细]
  • 解读MySQL查询执行计划的详细指南
    本文旨在帮助开发者和数据库管理员深入了解如何解读MySQL查询执行计划。通过详细的解析,您将掌握优化查询性能的关键技巧,了解各种访问类型和额外信息的含义。 ... [详细]
author-avatar
手机用户2502895475
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有