Hadoop 集群环境搭建

目录

第一部分:系统安装... 3

1:图形化安装... 3

2:选择中文... 3

3:安装选项... 3

4:软件选项... 4

5:安装位置... 4

6:网络配置... 6

7:开始安装... 7

8:创建用户... 7

9:重启系统... 7

10:登录测试... 8

第二部分:初始化设置... 9

1:SSH远程登录... 9

2:yum 源更新... 9

3:安装vim和wget. 11

4:增加test 用户权限... 12

5:修改主机 /tec/hosts 文件... 14

6:配置test 账户免密ssh 登录... 15

7:防火墙设置开机关闭... 17

第三部分:Java jdk 安装配置... 19

1:检查JAVA状态... 19

2:安装JAVA 1.8. 19

3配置环境变量... 20

第四部分:Hadoop 集群安装... 22

1:下载hadoop. 22

2:修改环境变量... 23

3:节点配置... 24

1:主节点安装(server1)... 24

2:备节点安装(server2 server3)... 28

第五部分:Hadoop 状态检查和常用命令... 31

1:网页状态查看... 31

2:控制台命令... 32

1:常用排查故障命令... 32

2:常用基础命令... 32

3:HDFS命令(Hadoop分布式文件系统)... 32

4:MapReduce作业运行命令... 33

5:YARN(Yet Another Resource Negotiator)命令... 33

6:Hadoop集群管理命令... 33

7:Hadoop配置文件管理命令... 33

第一部分:系统安装

大致过程:软件安装选择-------磁盘分区-------IP地址设置-----用户名密码设置

1:图形化安装

这里选择图形化安装。

2:选择中文

选择语言为中文。

3:安装选项

设置对应的安装选项。

4:软件选项

选择最小安装和系统管理工具。

5:安装位置

选择对应的磁盘并手动配置磁盘各分区大小。

点击自动创建

调整 /home 分区和/ 分区的大小,因为Hadoop默认的存储路径是在/目录下,所以/目录需要分配大一点。

分配后的各部分大小。

6:网络配置

手动指定IP地址和主机名。

215三台分别是192.168.1.190/191/192

7:开始安装

相关推荐

  1. Linux环境Hadoop及完全分布式

    2023-12-21 06:42:05       18 阅读
  2. nginx: 环境配置

    2023-12-21 06:42:05       13 阅读

最近更新

  1. TCP协议是安全的吗?

    2023-12-21 06:42:05       16 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2023-12-21 06:42:05       16 阅读
  3. 【Python教程】压缩PDF文件大小

    2023-12-21 06:42:05       15 阅读
  4. 通过文章id递归查询所有评论(xml)

    2023-12-21 06:42:05       18 阅读

热门阅读

  1. Hadoop伪分布式集群安装

    2023-12-21 06:42:05       38 阅读
  2. 定制@ResponseBody

    2023-12-21 06:42:05       29 阅读
  3. 【GIT】新建分支

    2023-12-21 06:42:05       40 阅读
  4. iOS 收集 SDK 内部 log

    2023-12-21 06:42:05       48 阅读
  5. Web 安全之文件上传漏洞详解

    2023-12-21 06:42:05       42 阅读
  6. 【ARM 安全系列介绍 3.2 -- Base64 介绍】

    2023-12-21 06:42:05       28 阅读
  7. 探索Node.js包管理器npm:介绍与使用指南

    2023-12-21 06:42:05       32 阅读
  8. 【工业智能】音频信号相关场景

    2023-12-21 06:42:05       31 阅读
  9. C语言实现寻找10000以内的完数

    2023-12-21 06:42:05       38 阅读
  10. Oracle中Null和‘‘的区别

    2023-12-21 06:42:05       37 阅读
  11. 12月20日,每日信息差

    2023-12-21 06:42:05       32 阅读