分布式hadoop集群访问web服务

一、启动和关闭节点

1、在NameNode节点上

(1)启动hdfs

start-dfs.sh 

(2)关闭hdfs

stop-dfs.sh 
2、在ResourceManager节点上

(1)启动yarn

start-yarn.sh

(2)关闭yarn

stop-yarn.sh

(3)开启任务历史服务(开启后会存储已提交的任务,有效期为七天)

mapred --daemon start historyserver

(4)关闭任务历史服务

 mapred --daemon stop historyserver

开启的服务都要在关闭虚拟机前关闭!

二、访问Web服务

1、访问NameNode的Web服务

(1)查看hdfs-site.xml配置文件

cd /opt/softs/hadoop3.1.3/etc/hadoop/
 cat hdfs-site.xml

获取到Web网址

http://bigdata03:9870 

 

(2)查看/etc/hosts

cat /etc/hosts

 

(3)将映射配置复制粘贴到C:\Windows\System32\drivers\etc下的hosts 

① 查找位置

② 修改文件权限

③ 在文件末尾加入对应映射关系

(4)在Windows的浏览器中访问http://bigdata03:9870 

2、访问yarn的Web服务

前面已经配置过了映射关系,可在Windows里直接访问http://bigdata05:8080

3、访问任务历史服务的Web服务

在ResourceManager节点上查看web网址

cd /opt/softs/hadoop3.1.3/etc/hadoop
cat yarn-site.xml

 在Windows中访问网址:http://bigdata05:19888/jobhistory

相关推荐

  1. Hadoop分布式安装

    2024-06-08 13:42:04       37 阅读
  2. Hadoop分布式安装

    2024-06-08 13:42:04       39 阅读
  3. Linux环境搭建Hadoop及完全分布式

    2024-06-08 13:42:04       18 阅读
  4. hadoop3.0高可用分布式安装

    2024-06-08 13:42:04       13 阅读
  5. Hadoop

    2024-06-08 13:42:04       19 阅读

最近更新

  1. TCP协议是安全的吗?

    2024-06-08 13:42:04       18 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2024-06-08 13:42:04       19 阅读
  3. 【Python教程】压缩PDF文件大小

    2024-06-08 13:42:04       18 阅读
  4. 通过文章id递归查询所有评论(xml)

    2024-06-08 13:42:04       20 阅读

热门阅读

  1. ajax回调函数

    2024-06-08 13:42:04       9 阅读
  2. 开源大模型与闭源大模型浅析

    2024-06-08 13:42:04       9 阅读
  3. 从入门到精通:基础IO

    2024-06-08 13:42:04       8 阅读
  4. 使用Docker运行不同版本的Node.js

    2024-06-08 13:42:04       11 阅读
  5. 40.任务调度线程池

    2024-06-08 13:42:04       9 阅读