加入收藏 | 设为首页 | 会员中心 | 我要投稿 济南站长网 (https://www.0531zz.com/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 运营中心 > 建站资源 > 优化 > 正文

阿里大牛详解分布式系统,大型网站分布式系统实战解析

发布时间:2019-08-06 05:07:38 所属栏目:优化 来源:JavaSpring高级进阶
导读:副标题#e# 分布式系统 分布式系统从当初的CORBA 到EJB,Web和SOA,从集群到现在的NoSQL 云计算和大数据Hadoop等分布式系统,横向水平扩展Scala out/in是分布式系统设计的一个特点,可靠性 容错性是两个质量指标。 什么是分布式系统? 一大批服务器组成一个

构建面向服务架构的第一步是确定每个函数功能如何构成整体业务目标,将这些业务映射到离散的服务,且具有独立的断层边界、扩展性和数据负载量。确定为每个服务时,您必须考虑下列事项:

  • 地理. 系统是全球还是地区单独运行?
  • 数据隔离. 这个系统提供一个单个或多租户模型?
  • SLAs. 可用性 延迟 吞吐量 一致性和冗余性都必须定义。
  • 安全. IAAA (身份identity, 验证authentication, 授权authorization, 和 审核audit), 数据的保密性和隐私性都必须考虑
  • 可用性跟踪. 了解系统的使用是每天系统的日常运作,如容量规划。也可能用于执行计费系统的使用和/或治理(配额/速度限制)。
  • 部署和配置管理. 系统是如何部署更新?

分布式系统的模型抽象

  • 系统模型(异步/同步)
  • 失效模型(崩溃故障,分区)
  • 一致性模型(强,最终)

通常,我们最熟悉的模式(例如,一个分布式系统上实现共享内存抽象)是太昂贵了。一个分布式系统越弱势越能保证其中元素有更大的行动自由,从而焕发潜在的更大的性能- 但它也可能导致很难管理。这就需要我们有极大智慧,不能以牺牲性能换来管理的方便性。因此,试图将分布式系统看成一个统一的单一系统的思维会阻碍分布式系统的扩展。

分布式系统遵循CAP定律,在高一致性 高可用性和分区容错性之间三选二:

阿里大牛详解分布式系统,大型网站分布式系统实战解析

  • CA (consistency高一致性 + availability高可用性). 使用2pc 两阶段事务提交来保证。其缺点无法实现分区容错性,一旦某个操作失败,整个系统就出错,无法容忍(水至清则无鱼)。
  • CP (consistency高一致性 + partition tolerance分区容错性). 使用Paxos来保证,可用性降低。
  • AP (availability高可用性 + partition tolerance分区容错性). 使用Gossip等实现最终一致性,如Dynamo.
  • 如何正确理解CAP理论?
分布式系统的设计技巧:分区和复制

对于一个数据集有两种设计方式:

  1. 分区:它可以被分割在多个节点,以允许更多的并行处理。有更好的性能,但是容错能力低。
  2. 复制:它也可以被复制或缓存在不同的节点上,以减少在客户端和服务器之间的距离,更强的容错能力,但是复制消耗性能。关键是复制数据之间的一致性。弱一致性提供更低的延迟和更高的可用性。

分布式系统的设计技巧:时钟和顺序

分布式系统针对计算和存储的策略是不同的,对于数据的存储主要是分区和复制,而对于计算主要是保证事件的顺序,因为分布式计算任务是由事件驱动的,比如Storm等等。那么事件的顺序代表了业务逻辑的顺序,事件有时是树形嵌套事件,可靠性就是必须保证一个树形集合所有事件都得到网站执行是一个事务原子的。

(编辑:济南站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!