yarn工作机制

YARN架构组成

YARN主要由ResourceManagerNodeManagerApplicationMasterContainer等组件构成

yarn的工作机制:这个把applicationMaster看成一种特殊task比较好理解 ,这个task负责一个job数据的切分,任务切分,任务资源申请,监控任务执行。

YARN资源调度策略

任务调度由ResourceManager里的Scheduler负责资源调度,抽象理解为:火车调度室的调动员管理火车谁该进站

FIFO调度器(先进先出)

 容量调度器

公平调度器 

 

相关推荐

  1. 包管理工具npm与yarn

    2024-03-13 22:26:07       33 阅读
  2. pnpm、npm、yarn 包管理工具

    2024-03-13 22:26:07       35 阅读
  3. node和npm yarn包管理工具

    2024-03-13 22:26:07       21 阅读
  4. Vuex工作机制

    2024-03-13 22:26:07       18 阅读

最近更新

  1. TCP协议是安全的吗?

    2024-03-13 22:26:07       18 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2024-03-13 22:26:07       19 阅读
  3. 【Python教程】压缩PDF文件大小

    2024-03-13 22:26:07       18 阅读
  4. 通过文章id递归查询所有评论(xml)

    2024-03-13 22:26:07       20 阅读

热门阅读

  1. 车联网术语汇总 车联网术语汇总

    2024-03-13 22:26:07       19 阅读
  2. UE5 获取各个信息的像素

    2024-03-13 22:26:07       25 阅读
  3. 基础 | 并发编程 - [线程状态]

    2024-03-13 22:26:07       23 阅读
  4. 英伟达tx2光驱烧录功能支持

    2024-03-13 22:26:07       25 阅读
  5. js的异步请求?

    2024-03-13 22:26:07       28 阅读
  6. 学习记录之数学表达式(1)

    2024-03-13 22:26:07       17 阅读
  7. ReentrantReadWriteLock学习

    2024-03-13 22:26:07       20 阅读
  8. Python中,括号内部的for循环(列表推导式)

    2024-03-13 22:26:07       20 阅读