Hadoop WordCount 实验步骤详解

本教程将详细介绍使用 Hadoop 运行 WordCount 程序进行词频统计的步骤，并提供示例命令。

1. 创建文件夹

使用命令 hadoop fs -mkdir wordcount_input 在 HDFS 中创建一个名为 'wordcount_input' 的文件夹。

2. 上传文本文件

使用命令 hadoop fs -put /home/hadoop/21.txt wordcount_input 将本地文件系统中的 '21.txt' 文件上传至 HDFS 的 'wordcount_input' 文件夹中。同样地，也将 '16.txt' 文件上传至该文件夹中。

3. 查看文件夹内容

使用命令 hadoop fs -ls wordcount_input 查看 HDFS 中 'wordcount_input' 文件夹中的内容。

4. 运行 WordCount

使用命令 hadoop jar /usr/local/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.9.2.jar wordcount wordcount_input output 运行 WordCount，其中 'wordcount_input' 为输入文件夹，'output' 为输出文件夹。

5. 查看输出结果

使用命令 hadoop fs -ls output 查看输出文件夹中的内容，使用命令 hadoop fs -cat output/part-r-00000 查看结果文件中的内容。