Hadoop学习之Windows单机版安装

2021-01-15 08:12

阅读：517

标签：reduce start host 系统 default div oop handle 环境变量path

配置Hadoop环境变量：
1.Windows环境变量配置

鼠标右键点击‘计算机’-‘属性’-‘高级系统设置’-‘环境变量’-单击新建如图：

2.接着找到环境变量path，将hadoop的bin目录加入到后面:

修改hadoop配置文件

（1）编辑“D:\hadoop-2.7.5\etc\hadoop”下的core-site.xml文件，将下列文本粘贴进去，并保存；


    
        hadoop.tmp.dir
        /D:/hadoop-2.7.5/workplace/tmp
    
    
        dfs.name.dir
        /D:/hadoop-2.7.5/workplace/name
    
    
        fs.default.name
        hdfs://localhost:9000

（2）编辑“D:\hadoop-2.7.5\etc\hadoop”目录下的mapred-site.xml(没有就将mapred-site.xml.template重命名为mapred-site.xml)文件，粘贴一下内容并保存:


    
       mapreduce.framework.name
       yarn
    
    
       mapred.job.tracker
       hdfs://localhost:9001

（3）编辑“D:\hadoop-2.7.5\etc\hadoop”目录下的hdfs-site.xml文件，粘贴以下内容并保存。请自行创建data目录，在这里我是在HADOOP_HOME目录下创建了workplace/data目录:


    
    
        dfs.replication
        1
    
    
        dfs.data.dir
        /D:/hadoop-2.7.5/workplace/data

（4）编辑“D:\hadoop-2.7.5\etc\hadoop”目录下的yarn-site.xml文件，粘贴以下内容并保存；


    
       yarn.nodemanager.aux-services
       mapreduce_shuffle
    
    
       yarn.nodemanager.aux-services.mapreduce.shuffle.class
       org.apache.hadoop.mapred.ShuffleHandler

（5）编辑“D:\hadoop-2.7.5\etc\hadoop”目录下的hadoop-env.cmd文件，将JAVA_HOME用 @rem注释掉，编辑为JAVA_HOME的路径，然后保存:

@rem set JAVA_HOME=%JAVA_HOME%
set JAVA_HOME=D:\java\jdk

替换文件
将下载好的hadooponwindows-master.zip（笔记第一步有下载地址，不知道可以去笔记开头的需求栏目查看）解压，将解压后的bin目录下的所有文件直接覆盖Hadoop的bin目录。备注：下载hadooponwindows-master.zip（后面有用）

运行环境

1.运行cmd窗口，执行“hdfs namenode -format

2.运行cmd窗口，切换到hadoop的sbin目录，执行“start-all.cmd”，它将会启动以下进程。

转自：https://blog.csdn.net/a2099948768/article/details/79577246

Hadoop学习之Windows单机版安装

标签：reduce start host 系统 default div oop handle 环境变量path

原文地址：https://www.cnblogs.com/sunfie/p/12243042.html

上一篇：.netcore 3.1高性能微服务架构：webapi规范

下一篇：【WPF学习】第十八章多点触控输入

文章来自：搜素材网的编程语言模块，转载请注明文章出处。
文章标题：Hadoop学习之Windows单机版安装
文章链接：http://soscw.com/index.php/essay/42168.html

亲，登录后才可以留言！

Hadoop学习之Windows单机版安装

评论

热门文章

推荐文章

最新文章

置顶文章