系统设计小抄 - 如何做到高可用、高吞吐、高扩展性

开发 前端
高扩展性意味着系统可以快速、轻松地扩展,以容纳更多的容量(横向可扩展性)或更多的功能(纵向可扩展性)。通常,我们通过观察响应时间来决定是否需要扩展系统。

我们经常需要设计具有高可用性、高可扩展性和高吞吐量的系统。它们的确切含义是什么?

下图是一份系统设计小抄,包含“三高”常见的解决方案。

图片图片

01 高可用性

高可用意味着我们需要达到一个高水平的正常运行时间。我们通常将设计目标描述为 "3 个 9 " 或 "4 个 9"。"4 个九",即 99.99% 的正常运行时间,意味着服务每天只能中断 8.64 秒。

要实现高可用性,我们需要在系统中设计冗余。有几种方法可以做到这一点:

  • Hot-Hot

两个实例接收相同的输入,并将输出发送到下游服务。如果其中一方宕机,另一方可以立即接替。由于两边都向下游发送输出,下游系统需要能够处理重复数据。

  • Hot-Warm

两个实例接收相同的输入,只有 Hot 端向下游服务发送输出。如果 Hot 端宕机, Warm 端将接替并开始向下游服务发送输出。

  • 单领导集群 (Single Leader)

一个领导实例从上游系统接收数据并复制到其他副本。

  • 无领导集群 (Leaderless)

这种集群中没有领导者。任何写入都会复制到其他实例。只要写入实例数加上读取实例数大于实例总数,我们就能获得有效数据。这被称为 quorum。

02 高吞吐量

这意味着服务需要在一段时间内处理大量请求。常用的指标是 QPS(每秒查询次数)或 TPS(每秒事务次数)。

为了实现高吞吐量,我们通常会在架构中添加缓存,以避免经过数据库或磁盘等较慢的 I/O 设备。我们还可以为计算密集型任务增加线程数量。但是,增加过多的线程会降低性能。因此,我们需要找出系统的瓶颈,提高系统的吞吐量。

我们还可以在系统中使用异步处理,以有效地单独隔离耗时耗资源的组件。

03 高扩展性

高扩展性意味着系统可以快速、轻松地扩展,以容纳更多的容量(横向可扩展性)或更多的功能(纵向可扩展性)。通常,我们通过观察响应时间来决定是否需要扩展系统。

要实现高度可扩展性,需要隔离每个服务的职责。为此,微服务被广泛采用。我们还利用服务注册和负载平衡器将请求路由到适当的实例。

责任编辑:武晓燕 来源: ByteByteGo
相关推荐

2019-08-08 10:18:15

运维架构技术

2017-05-08 08:44:07

TCP负载均衡扩展性架构

2020-10-28 08:07:58

TCP负载均衡网络协议

2013-04-09 10:16:28

OpenStackGrizzlyHyper-V

2024-03-08 09:46:53

2013-03-19 10:50:38

2020-11-30 08:28:14

高可扩展性系统

2014-05-29 10:09:13

甲骨文MySQL Fabri

2021-05-24 09:28:41

软件开发 技术

2023-10-06 12:08:53

Java代码

2021-01-07 14:10:42

开发运维软件

2009-08-24 18:01:42

惠普高扩展x86

2023-11-07 09:54:27

架构演进

2019-02-12 09:34:00

微博短视频架构

2017-09-13 13:42:09

微服务缓存架构

2019-05-06 10:19:31

服务高可用部署

2021-09-02 09:42:11

测试软件可扩展性开发

2022-11-28 17:22:32

高可用master节点

2013-06-07 11:30:32

点赞
收藏

51CTO技术栈公众号