向hdfs上传文件,运行程序,查看结果

2021-04-13 16:26

阅读:436

标签:blocks   文件   注意   下载   进入   soft   set   mapreduce   mapr   

1.建立目录 

hdfs dfs -mkdir -p /data/wc/input

2.上传文件

hdfs dfs -D dfs.blocksize=1048576 -put /setup/data.txt /data/wc/input

3.进入运行程序所在目录

cd /software/hadoop-2.7.7/share/hadoop/mapreduce

4.运行程序

hadoop jar hadoop-mapreduce-examples-2.7.7.jar wordcount /data/wc/input  /data/wc/output 

5.查看目录下的文件

hdfs dfs -ls /data/wc/output

6.查看具体文件内容

hdfs dfs -cat /data/wc/output/part-r-00000

7.下载文件

hdfs dfs -get /data/wc/output/part-r-00000 /setup

 

注意:输出目录“/data/wc/output ”,必须是空目录,否则会报错。

向hdfs上传文件,运行程序,查看结果

标签:blocks   文件   注意   下载   进入   soft   set   mapreduce   mapr   

原文地址:https://www.cnblogs.com/liuys635/p/12384912.html


评论


亲,登录后才可以留言!