一文读懂分布式与集群的区别究竟是什么？

点击上方[全栈开发者社区]→右上角[...]→[设为星标⭐]

在IDF05&＃xff08;Intel Developer Forum 2005&＃xff09;上&＃xff0c;Intel首席执行官Craig Barrett就取消4GHz芯片计划一事&＃xff0c;半开玩笑当众单膝下跪致歉&＃xff0c;给广大软件开发者一个明显的信号&＃xff0c;单纯依靠垂直提升硬件性能来提高系统性能的时代已结束&＃xff0c;分布式开发的时代实际上早已悄悄地成为了时代的主流。

吵得很热的云计算实际上只是包装在分布式之外的商业概念&＃xff0c;很多开发者&＃xff08;包括我&＃xff09;都想加入研究云计算这个潮流&＃xff0c;在google上通过“云计算”这个关键词来查询资料&＃xff0c;查到的都是些概念性或商业性的宣传资料&＃xff0c;其实真正需要深入的还是那个早已被人熟知的概念——分布式。

分布式可繁也可以简&＃xff0c;最简单的分布式就是大家最常用的&＃xff0c;在负载均衡服务器后加一堆web服务器&＃xff0c;然后在上面搞一个缓存服务器来保存临时状态&＃xff0c;后面共享一个数据库&＃xff0c;其实很多号称分布式专家的人也就停留于此&＃xff0c;大致结构如下图所示&＃xff1a;

这种环境下真正进行分布式的只是web server而已&＃xff0c;并且web server之间没有任何联系&＃xff0c;所以结构和实现都非常简单。

有些情况下&＃xff0c;对分布式的需求就没这么简单&＃xff0c;在每个环节上都有分布式的需求&＃xff0c;比如Load Balance、DB、Cache和文件等等&＃xff0c;并且当分布式节点之间有关联时&＃xff0c;还得考虑之间的通讯&＃xff0c;另外&＃xff0c;节点非常多的时候&＃xff0c;得有监控和管理来支撑。

这样看起来&＃xff0c;分布式是一个非常庞大的体系&＃xff0c;只不过你可以根据具体需求进行适当地裁剪。按照最完备的分布式体系来看&＃xff0c;可以由以下模块组成&＃xff1a;

• 分布式任务处理服务&＃xff1a;负责具体的业务逻辑处理

• 分布式节点注册和查询&＃xff1a;负责管理所有分布式节点的命名和物理信息的注册与查询&＃xff0c;是节点之间联系的桥梁

• 分布式DB&＃xff1a;分布式结构化数据存取

• 分布式Cache&＃xff1a;分布式缓存数据&＃xff08;非持久化&＃xff09;存取

• 分布式文件&＃xff1a;分布式文件存取

• 网络通信&＃xff1a;节点之间的网络数据通信

• 监控管理&＃xff1a;搜集、监控和诊断所有节点运行状态

• 分布式编程语言&＃xff1a;用于分布式环境下的专有编程语言&＃xff0c;比如Elang、Scala

• 分布式算法&＃xff1a;为解决分布式环境下一些特有问题的算法&＃xff0c;比如解决一致性问题的Paxos算法

• 
  

因此&＃xff0c;若要深入研究云计算和分布式&＃xff0c;就得深入研究以上领域&＃xff0c;而这些领域每一块的水都很深&＃xff0c;都需要很底层的知识和技术来支撑&＃xff0c;所以说&＃xff0c;对于想提升技术的开发者来说&＃xff0c;以分布式来作为切入点是非常好的&＃xff0c;可以以此为线索&＃xff0c;探索计算机世界的各个角落。

集群是个物理形态&＃xff0c;分布式是个工作方式。

只要是一堆机器&＃xff0c;就可以叫集群&＃xff0c;他们是不是一起协作着干活&＃xff0c;这个谁也不知道&＃xff1b;一个程序或系统&＃xff0c;只要运行在不同的机器上&＃xff0c;就可以叫分布式&＃xff0c;嗯&＃xff0c;C/S架构也可以叫分布式。

集群一般是物理集中、统一管理的&＃xff0c;而分布式系统则不强调这一点。

所以&＃xff0c;集群可能运行着一个或多个分布式系统&＃xff0c;也可能根本没有运行分布式系统&＃xff1b;分布式系统可能运行在一个集群上&＃xff0c;也可能运行在不属于一个集群的多台&＃xff08;2台也算多台&＃xff09;机器上。

分布式是相对中心化而来&＃xff0c;强调的是任务在多个物理隔离的节点上进行。中心化带来的主要问题是可靠性&＃xff0c;若中心节点宕机则整个系统不可用&＃xff0c;分布式除了解决部分中心化问题&＃xff0c;也倾向于分散负载&＃xff0c;但分布式会带来很多的其他问题&＃xff0c;最主要的就是一致性。

集群就是逻辑上处理同一任务的机器集合&＃xff0c;可以属于同一机房&＃xff0c;也可分属不同的机房。分布式这个概念可以运行在某个集群里面&＃xff0c;某个集群也可作为分布式概念的一个节点。

一句话&＃xff0c;就是&＃xff1a;“分头做事”与“一堆人”的区别

分布式是指将不同的业务分布在不同的地方。而集群指的是将几台服务器集中在一起&＃xff0c;实现同一业务。

分布式中的每一个节点&＃xff0c;都可以做集群。而集群并不一定就是分布式的。

举例&＃xff1a;就比如新浪网&＃xff0c;访问的人多了&＃xff0c;他可以做一个群集&＃xff0c;前面放一个响应服务器&＃xff0c;后面几台服务器完成同一业务&＃xff0c;如果有业务访问的时候&＃xff0c;响应服务器看哪台服务器的负载不是很重&＃xff0c;就将给哪一台去完成。

而分布式&＃xff0c;从窄意上理解&＃xff0c;也跟集群差不多&＃xff0c; 但是它的组织比较松散&＃xff0c;不像集群&＃xff0c;有一个组织性&＃xff0c;一台服务器垮了&＃xff0c;其它的服务器可以顶上来。

分布式的每一个节点&＃xff0c;都完成不同的业务&＃xff0c;一个节点垮了&＃xff0c;哪这个业务就不可访问了。

简单说&＃xff0c;分布式是以缩短单个任务的执行时间来提升效率的&＃xff0c;而集群则是通过提高单位时间内执行的任务数来提升效率。

例如&＃xff1a;如果一个任务由10个子任务组成&＃xff0c;每个子任务单独执行需1小时&＃xff0c;则在一台服务器上执行该任务需10小时。

采用分布式方案&＃xff0c;提供10台服务器&＃xff0c;每台服务器只负责处理一个子任务&＃xff0c;不考虑子任务间的依赖关系&＃xff0c;执行完这个任务只需一个小时。(这种工作模式的一个典型代表就是Hadoop的Map/Reduce分布式计算模型&＃xff09;

而采用集群方案&＃xff0c;同样提供10台服务器&＃xff0c;每台服务器都能独立处理这个任务。假设有10个任务同时到达&＃xff0c;10个服务器将同时工作&＃xff0c;1小时后&＃xff0c;10个任务同时完成&＃xff0c;这样&＃xff0c;整身来看&＃xff0c;还是1小时内完成一个任务&＃xff01;

集群一般被分为三种类型&＃xff0c;高可用集群如RHCS、LifeKeeper等&＃xff0c;负载均衡集群如LVS等、高性能运算集群;分布式应该是高性能运算集群范畴内。

• 分布式&＃xff1a;不同的业务模块部署在不同的服务器上或者同一个业务模块分拆多个子业务&＃xff0c;部署在不同的服务器上&＃xff0c;解决高并发的问题

• 集群&＃xff1a;同一个业务部署在多台机器上&＃xff0c;提高系统可用性

大白话讲

小饭店原来只有一个厨师&＃xff0c;切菜洗菜备料炒菜全干。后来客人多了&＃xff0c;厨房一个厨师忙不过来&＃xff0c;又请了个厨师&＃xff0c;两个厨师都能炒一样的菜&＃xff0c;这两个厨师的关系是集群。

为了让厨师专心炒菜&＃xff0c;把菜做到极致&＃xff0c;又请了个配菜师负责切菜&＃xff0c;备菜&＃xff0c;备料&＃xff0c;厨师和配菜师的关系是分布式&＃xff0c;一个配菜师也忙不过来了&＃xff0c;又请了个配菜师&＃xff0c;两个配菜师关系是集群。

荐书&＃xff1a;《机器学习入门--基于数学原理的Python实战》

明晚21:30~22:30本书作者戴璞微老师在当当平台直播。
直播地址&＃xff1a;淘宝搜索当当网官方旗舰店或在当当APP的直播频道。

如何购买&＃xff1a;点击阅读原文购买&＃xff0c;也可坚持留言打卡获得&＃xff01;
如何赠送&＃xff1a;留言集赞数大于30赞且排名第一的同学赠送一本&＃xff0c;定价69RMB。觉得本文对你有帮助&＃xff1f;请分享给更多人关注「全栈开发者社区」加星标&＃xff0c;提升全栈技能
本公众号会不定期给大家发福利&＃xff0c;包括送书、学习资源等&＃xff0c;敬请期待吧&＃xff01;
如果感觉推送内容不错&＃xff0c;不妨右下角点个在看转发朋友圈或收藏&＃xff0c;感谢支持。
好文章&＃xff0c;我在看❤️