热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

MongoDB数据库集群分片技术介绍

一、分片分片就是对数据库中的数据进行拆分保存在不同机器上;分片包括手动分片和自动分片;MongoDB则支持自动分片;二、mongosMongoDB需要路由进程mongos,mongos知道所有数据的存放位置,应用连接mongos发送请求.mongos对应用隐藏分片细节,将请求转发到相

一、分片

分片就是对数据库中的数据进行拆分保存在不同机器上;

分片包括手动分片和自动分片;

MongoDB则支持自动分片;

二、mongos

MongoDB需要路由进程mongos,mongos知道所有数据的存放位置,应用连接mongos发送请求.mongos对应用隐藏分片细节,将请求转发到相应数据库机器;

三、片键

1.片键是作为数据拆分的依据,MongoDB依据片键将数据拆分;

根据机器的数量的添加和删除,MongoDB会重新平衡数据,使的其流量比较均衡;

2.片键种类

片键包括递增片键和随机片键;

像"timestamp"就属于递增片键,特点是数据写入将集中在一台服务器、而数据的查询速度非常快;

片键的选择将影响对数据查询的操作

四、建立分片

分片包括三个组成部分,分别是:片、mongos、配置服务器;

片:集合数据容器

mongos:路由器进程

配置服务器:存储集群配置信息

1.启动配置服务器

mkdir -p ~/dbs/config
./mongod --dbpath ~/dbs/config --port 20000

2.启动配置服务器

./mongos --port 3000 --configdb localhost:20000

3.创建分片

mkdir -p ~/dbs/db1
./mongod --dbpath ~/dbs/shard1 --port 10000

4.添加片

连接mongos

./mongo localhost:30000/admin

通过addshard命令添加片(allowLocal允许配置在本地)

db.runCommand({addshard:"localhost:10000",allowLocal:true})
{
     "added":"localhost:10000",
     "ok":true
}

5.切分数据库will的test集合

首先开启will数据库的分片功能

db.runCommand({"enablesharding":"will"})

再对集合分片(以_id为基准)

db.runCommand({"shardcollection":"will.test","key":{"_id":1}})

五、保证集群的健壮性

1.多配置服务器

方法:重复配置服务器创建步骤;

     启动mongos时 ./mongos --configdb localhost:20001,localhost:20002

2.多mongos进程

方法:多启动

3.数据的容错性

方法:创建数据副本

六、管理分片

1.查看片

2.查看在片上的数据库列表信息

结果中:

_id:数据库名

partitioned:是否启用分片

primary:数据库大本营

3.块信息查看


推荐阅读
  • 深入解析 Apache Shiro 安全框架架构
    本文详细介绍了 Apache Shiro,一个强大且灵活的开源安全框架。Shiro 专注于简化身份验证、授权、会话管理和加密等复杂的安全操作,使开发者能够更轻松地保护应用程序。其核心目标是提供易于使用和理解的API,同时确保高度的安全性和灵活性。 ... [详细]
  • Docker的安全基准
    nsitionalENhttp:www.w3.orgTRxhtml1DTDxhtml1-transitional.dtd ... [详细]
  • 本文探讨了如何在日常工作中通过优化效率和深入研究核心技术,将技术和知识转化为实际收益。文章结合个人经验,分享了提高工作效率、掌握高价值技能以及选择合适工作环境的方法,帮助读者更好地实现技术变现。 ... [详细]
  • 58同城的Elasticsearch应用与平台构建实践
    本文由58同城高级架构师于伯伟分享,由陈树昌编辑整理,内容源自DataFunTalk。文章探讨了Elasticsearch作为分布式搜索和分析引擎的应用,特别是在58同城的实施案例,包括集群优化、典型应用实例及自动化平台建设等方面。 ... [详细]
  • 近期参与了一个旨在提高在线平台大规模查询响应速度的项目,预计处理的数据量为2-3亿条,数据库并发量约为每秒1500次,未来可能增至3000次。通过对比Redis和MongoDB,最终选择了MongoDB,因其具备优秀的横向扩展性和GridFS支持下的Map/Reduce功能。 ... [详细]
  • This guide provides a comprehensive step-by-step approach to successfully installing the MongoDB PHP driver on XAMPP for macOS, ensuring a smooth and efficient setup process. ... [详细]
  • 本文详细介绍了 Dockerfile 的编写方法及其在网络配置中的应用,涵盖基础指令、镜像构建与发布流程,并深入探讨了 Docker 的默认网络、容器互联及自定义网络的实现。 ... [详细]
  • 解决MongoDB Compass远程连接问题
    本文记录了在使用阿里云服务器部署MongoDB后,通过MongoDB Compass进行远程连接时遇到的问题及解决方案。详细介绍了从防火墙配置到安全组设置的各个步骤,帮助读者顺利解决问题。 ... [详细]
  • 在现代网络环境中,两台计算机之间的文件传输需求日益增长。传统的FTP和SSH方式虽然有效,但其配置复杂、步骤繁琐,难以满足快速且安全的传输需求。本文将介绍一种基于Go语言开发的新一代文件传输工具——Croc,它不仅简化了操作流程,还提供了强大的加密和跨平台支持。 ... [详细]
  • Hadoop入门与核心组件详解
    本文详细介绍了Hadoop的基础知识及其核心组件,包括HDFS、MapReduce和YARN。通过本文,读者可以全面了解Hadoop的生态系统及应用场景。 ... [详细]
  • 探讨如何真正掌握Java EE,包括所需技能、工具和实践经验。资深软件教学总监李刚分享了对毕业生简历中常见问题的看法,并提供了详尽的标准。 ... [详细]
  • 作为一名专业的Web前端工程师,掌握HTML和CSS的命名规范是至关重要的。良好的命名习惯不仅有助于提高代码的可读性和维护性,还能促进团队协作。本文将详细介绍Web前端开发中常用的HTML和CSS命名规范,并提供实用的建议。 ... [详细]
  • 本文探讨了在 ASP.NET MVC 5 中实现松耦合组件的方法。通过分离关注点,应用程序的各个组件可以更加独立且易于维护和测试。文中详细介绍了依赖项注入(DI)及其在实现松耦合中的作用。 ... [详细]
  • Mongoose 5.12.10 发布:MongoDB 异步对象模型工具的新特性与修复
    Mongoose 是一款专为异步环境设计的 MongoDB 对象模型工具,支持 Promise 和回调函数。最新版本 Mongoose 5.12.10 带来了多项修复和改进,包括查询选项中的默认值设置、嵌入式判别器填充、以及 TypeScript 定义文件的优化。 ... [详细]
  • 本文介绍了如何利用MongoDB的$exists操作符在Java应用程序中检查特定字段是否存在于文档中,包括示例代码和解释。 ... [详细]
author-avatar
情人節快樂1991的名单
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有