架构篇27:如何设计计算高可用架构?

文章目录


在这里插入图片描述

计算高可用的主要设计目标是:当出现部分硬件损坏时,计算任务能够继续正常运行。因此计算高可用的本质是通过冗余来规避部分故障的风险,单台服务器是无论如何都达不到这个目标的。所以计算高可用的设计思想很简单:通过增加更多服务器来达到计算高可用。

计算高可用架构的设计复杂度主要体现在任务管理方面,即当任务在某台服务器上执行失败后,如何将任务重新分配到新的服务器进行执行。因此,计算高可用架构设计的关键点有下面两点。

  1. 哪些服务器可以执行任务

第一种方式和计算高性能中的集群类似,每个服务器都可以执行任务。例如,常见的访问网站的某个页面。

第二种方式和存储高可用中的集群类似,只有特定服务器(通常叫“主机”)可以执行任务。当执行任务的服务器故障后,系统需要挑选新的服务器来执行任务。例如,ZooKeeper 的 Leader 才能处理写操作请求。

  1. 任务如何重新执行

第一种策略是对于已经分配的任务即使执行失败也不做任何处理,系统只需要保证新的任务能够分配到其他非故障服务器上执行即可。

第二种策略是设计一个任务管理器来管理需要执行的计算任务,服务器执行完任务后,需要向任务管理器反馈任务执行结果,任务管理器根据任务执行结果来决定是否需要将任务重新分配到另外的服务器上执行。

需要注意的是:“任务分配器”是一个逻辑的概念,并不一定要求系统存在一个独立的任务分配器模块。例如:

  • Nginx 将页面请求发送给 Web 服务器,而 CSS/JS 等静态文件直接读取本地缓存。这里的 Nginx 角色是反向代理系统,但是承担了任务分配器的职责,而不需要 Nginx 做反向代理,后面再来一个任务分配器。
  • 对于一些后台批量运算的任务,可以设计一个独立的任务分配系统来管理这些批处理任务的执行和分配

相关推荐

  1. 【RabbitMQ可用集群架构

    2024-01-27 12:18:03       57 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-01-27 12:18:03       98 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-01-27 12:18:03       106 阅读
  3. 在Django里面运行非项目文件

    2024-01-27 12:18:03       87 阅读
  4. Python语言-面向对象

    2024-01-27 12:18:03       96 阅读

热门阅读

  1. centos搭建ftp踩坑记录

    2024-01-27 12:18:03       46 阅读
  2. 四、MySQL之DML && DQL

    2024-01-27 12:18:03       48 阅读
  3. 排序算法——希尔排序算法详解

    2024-01-27 12:18:03       51 阅读
  4. 实习记录——第五天

    2024-01-27 12:18:03       48 阅读
  5. Hive之set参数大全-15

    2024-01-27 12:18:03       32 阅读
  6. linux深度学习开发基础命令——极简版

    2024-01-27 12:18:03       58 阅读
  7. 再学webpack

    2024-01-27 12:18:03       35 阅读
  8. 基于Puppeteer实现配置自动化

    2024-01-27 12:18:03       58 阅读