运行Hadoop中MapReduce自带的WordCount程序

执行wordcount程序(词频统计)

  • 创建目录,保存MapReduce的输入文件
hadoop fs -mkdir /wcinput
  • 创建目录,保存MapReduce的输出文件
hadoop fs -mkdir /wcoutput

因为Hadoop要求输出文件夹不能存在,所以这只是空文件夹,在执行时再确定输出文件夹,如/wcoutput/output1
在这里插入图片描述

  • 创建一个文本文件,并上传到保存输入文件的文件夹中
    在这里插入图片描述
    在这里插入图片描述
  • 运行WordCount程序
hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar wordcount /wcinput /wcoutput/output1

在这里插入图片描述

  • 本地查看结果(截取部分)
    在这里插入图片描述
  • 远程查看结果
    在这里插入图片描述
    在这里插入图片描述
    初学,犯了很蠢的错误,没有文件就开始运行程序,词频统计没有词怎么统计嘛
    在这里插入图片描述

相关推荐

  1. 【实验2】在Hadoop平台上部署WordCount程序

    2023-12-25 14:06:02       33 阅读

最近更新

  1. TCP协议是安全的吗?

    2023-12-25 14:06:02       16 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2023-12-25 14:06:02       16 阅读
  3. 【Python教程】压缩PDF文件大小

    2023-12-25 14:06:02       15 阅读
  4. 通过文章id递归查询所有评论(xml)

    2023-12-25 14:06:02       18 阅读

热门阅读

  1. obs video-io.c

    2023-12-25 14:06:02       29 阅读
  2. 策略模式(Strategy)

    2023-12-25 14:06:02       36 阅读
  3. Transformer 模型设计的灵感

    2023-12-25 14:06:02       33 阅读
  4. 【题解】洛谷 P9183 [USACO23OPEN] FEB B

    2023-12-25 14:06:02       38 阅读
  5. git拉取远程分支到本地

    2023-12-25 14:06:02       36 阅读
  6. 【前端基础】uniapp、axios 获取二进制图片

    2023-12-25 14:06:02       43 阅读
  7. 使用Uniapp随手记录知识点

    2023-12-25 14:06:02       37 阅读
  8. DrmOpenWithType

    2023-12-25 14:06:02       32 阅读
  9. go语言基础 -- 字符串及其常用函数

    2023-12-25 14:06:02       33 阅读