Hadoop面试重点

1. Hadoop 常用端口号

hadoop2.x hadoop3.x
访问HDFS 端口 50070 9870
访问 MR 执行情况端口 8088 8088
历史服务器 19888 19888
客户端访问集群端口 9000 8020

2.Hadoop特点

  1. 高可靠:Hadoop底层维护多个数据副本,所以即使Hadoop某个计算元素或存储出现故障,也不会导致数据的丢失。
    在这里插入图片描述
  2. 高扩展性:在集群间分配任务数据,可方便的扩展数以千计的节点。
    在这里插入图片描述
  3. 高效性:在MapReduce的思想下,Hadoop是并行工作的,以加快任务处理速度。
    在这里插入图片描述
  4. 高容错性:能够自动将失败的任务重新分配。
    在这里插入图片描述

3.Hadoop1.x、2.x、3.x区别

  • 在Hadoop1.x 时代,Hadoop中的MapReduce同时处理业务逻辑运算和资源的调度,耦合性较大。
  • 在Hadoop2.x时代,增加了Yarn。Yarn只负责资源的调度MapReduce只负责运算
  • Hadoop3.x在组成上没有变化。
    在这里插入图片描述

相关推荐

  1. HDFS面试重点

    2024-03-29 05:24:08       47 阅读
  2. MapReduce面试重点

    2024-03-29 05:24:08       39 阅读
  3. Yarn面试重点

    2024-03-29 05:24:08       44 阅读
  4. Spark面试重点

    2024-03-29 05:24:08       38 阅读
  5. Hive面试重点

    2024-03-29 05:24:08       46 阅读
  6. Hadoop之HDFS重点架构原理简介

    2024-03-29 05:24:08       25 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-03-29 05:24:08       94 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-03-29 05:24:08       100 阅读
  3. 在Django里面运行非项目文件

    2024-03-29 05:24:08       82 阅读
  4. Python语言-面向对象

    2024-03-29 05:24:08       91 阅读

热门阅读

  1. Ubuntu下显卡超频和提高功耗方式

    2024-03-29 05:24:08       46 阅读
  2. 【PostgreSQL】- 1.1 在 Debian 12 上安装 PostgreSQL 15

    2024-03-29 05:24:08       49 阅读
  3. Docker版本:18.06.1安装

    2024-03-29 05:24:08       35 阅读
  4. Debian GNU/Linux 安装docker与docker compose

    2024-03-29 05:24:08       33 阅读
  5. vue3中onUnmounted详解

    2024-03-29 05:24:08       40 阅读
  6. Linux(CentOS)/Windows-C++ 云备份项目(结项,项目总结)

    2024-03-29 05:24:08       41 阅读
  7. Kotlin:@JvmOverloads注解

    2024-03-29 05:24:08       41 阅读