品牌知名度调研问卷>>

分布式系统的技术栈分析 分布式管理系统常用技术和应用场景

本文章由注册用户 知无涯 上传提供 评论 发布 纠错/删除 版权声明 0
摘要:分布式系统是一种复杂的系统,应用过程中会衍生出很多分布式需求,为了应对这些需求,分布式系统的技术栈主要有分布式通信技术、分布式资源管理和负载调度技术、分布式协调与同步技术、分布式存储技术等,不同的技术在应用场景方面也有所不同,下面一起来看看分布式系统的技术栈分析以及分布式管理系统常用技术和应用场景吧。

一、分布式系统的技术栈分析

分布式系统的出现是业务发展导致的最终结果,而由于业务的拆分,我们又被迫会衍生出更多的分布式需求来,以及应对这些需求的技术:

1、因为业务拆分的多,业务对应的模块之间就需要通信,为了保证通信的快速可靠,我们需要掌握分布式通信技术

2、业务拆分的过多,每个模块可能还需要搞集群,那么多服务器资源,为了能够保证资源的精准分配,我们还需要考虑分布式资源管理和负载调度技术

3、业务拆分之后,模块与模块之间又需要对很多共享数据做访问,为了保证安全完整的数据状态,我们也要用到分布式协调与同步技术

4、到了业务拆分的阶段,数据必然庞大,为了数据存储的可靠,为了保证优秀的数据读写性能,我们需要分布式存储技术

5、业务如此复杂,为了公司的发展,业务能继续扩大,就需要能更加精准的营销和运营,我们还需要对数据进行实时、离线处理分析,此时,我们又得考虑分布式计算技术

6、在业务拆分后,整体架构出现了巨变,不可能再用以前集群方式的思维去考虑高可用,那么分布式的可靠性技术又要纳入我们的掌握范畴。

二、分布式管理系统常用技术和应用场景

1、consistent hashing:一致性哈希,解决数据均衡分布问题。

2、vector clock:时钟向量,多版本数据修改。

3、Quorum W R>N[with vector clock]:抽屉原理,数据一致性的另一种解决方案。时钟向量,多版本数据修改。

4、Merkle tree [with anti-entropy]:数据复制。

5、MVCC:copy-on-write与snapshot。

6、2PC/3PC:分布式事务。

7、Paxos:强一致性协议。

8、Symmetry and Decentralization:对称性和去中心化。对称性(symmetry)简化了系统的配置和维护,去中心化是对对称性的延伸,可以避免master单点,同时方便集群scale out。

9、Map-Reduce:分而治之;移动数据不如移动计算。将计算尽量调度到与存储节点在同一台物理机器上的计算节点上进行,这称之为本地化计算,本地化计算是计算调度的一种重要优化。

10、Gossip协议:节点管理。

网站提醒和声明
本站为注册用户提供信息存储空间服务,非“MAIGOO编辑”、“MAIGOO榜单研究员”、“MAIGOO文章编辑员”上传提供的文章/文字均是注册用户自主发布上传,不代表本站观点,版权归原作者所有,如有侵权、虚假信息、错误信息或任何问题,请及时联系我们,我们将在第一时间删除或更正。 申请删除>> 纠错>> 投诉侵权>> 网页上相关信息的知识产权归网站方所有(包括但不限于文字、图片、图表、著作权、商标权、为用户提供的商业信息等),非经许可不得抄袭或使用。
提交说明: 快速提交发布>> 查看提交帮助>> 注册登录>>
最新评论
相关推荐
分布式系统的CAP理论是什么 分布式系统CAP特性如何取舍
分布式系统的CAP理论是指一个分布式系统不可能同时满足数据一致性、服务可用性和分区容错性这三个基本需求,最多只能同时满足其中的两个,这一理论深刻影响着分布式系统的发展,在实际应用中,分布式系统会根据需求舍弃其中一个特性,大多数都是牺牲了一致性。下面一起来了解一下分布式系统的CAP理论是什么以及分布式系统CAP特性如何取舍吧。
无线连接产品有哪些?常见的无线连接问题解决方法
无线产品有哪些?无线产品是指带有无线模块的电子电器产品,常见的无线产品范围很广,包括我们常说的蓝牙产品,常见的有无线耳机、无线音响、无线路由器、无线键鼠、无线电力猫、无线上网卡等等,这些无线产品都可以通过无线网络进行连接。那么这些无线产品有什么优缺点?如何解决无线连接问题呢?下面一起来了解一下无线连接产品和一些无线连接问题处理方法。
数码产品 智能科技/数码 ★★★★
4156 58
分布式系统架构设计三大原则 分布式系统架构设计有哪些优化策略
分布式系统的架构设计直接关系到分布式系统的性能表现,进行架构设计时,要注意三大原则,分别是高可用设计、高并发设计和高性能设计,设计过程中,为了优化架构,可以采用数据分片、负载均衡、缓存机制、异步处理、分布式事务、容错处理等策略。下面一起来详细了解一下分布式系统架构设计三大原则以及分布式系统架构设计有哪些优化策略吧。
分布式系统有啥用 分布式管理系统可以管理什么
分布式系统可以连接多个计算机节点,实现高效的数据存储、处理和传输等功能,提高容错性,它在各个领域都有广泛的应用,常见的有数据库系统、Web应用、大规模并行计算、云计算等。分布式管理系统还能管理用户及其工作站配置,管理软件分布、更新与准许权限,管理硬件监控、维护和编目功能。下面一起来了解一下分布式系统有啥用以及分布式管理系统可以管理什么吧。
【汽车音响百科】车载音响选购技巧 汽车音响改装知识
汽车音响对于汽车而言,是一种辅助性的设备,对于汽车性能也没有什么影响,很多人购买了新车以后,都纷纷为自己的爱车安装音响设备,那么,汽车音响选购有什么技巧?汽车音响品牌哪种好呢?当您觉得汽车音响音质不好时,您又该如何改装呢?今天小编将为您详细了解汽车音响改装的知识。
车载音响 汽车零部件 ★★★
1.1w+ 166