windows 下安装和运行 hadoop

2021-02-17 11:19

阅读：652

windows下安装hadoop，直接去官网采用简单暴力的方法：

1、下载hadoop的安装包：http://hadoop.apache.org/->左边点Releases->点mirror site->点http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common->下载hadoop-2.9.0.tar.gz；

2、解压安装包：将下载包解压到指定目录，并添加环境变量；解压出来一个目录：D:\hadoop-2.9.0，将bin路径配置到环境变量中。然后http://download.csdn.net/detail/wuxun1997/9841472下载相关工具类，直接解压后把文件丢到D:\hadoop-2.9.0\bin目录中去，将其中的hadoop.dll在c:/windows/System32下也丢一份；

3、去D:\hadoop-2.9.0\etc\hadoop找到下面4个文件并按如下最小配置粘贴上去：

core.site.xml

configuration>
    property>
        name>fs.defaultFSname>
        value>hdfs://localhost:9000value>
    property>    
configuration>

hdfs-site.xml

configuration>
    property>
        name>dfs.replicationname>
        value>1value>
    property>
    property>    
        name>dfs.namenode.name.dirname>    
        value>file:/hadoop/data/dfs/namenodevalue>    
    property>    
    property>    
        name>dfs.datanode.data.dirname>    
        value>file:/hadoop/data/dfs/datanodevalue>  
    property>
configuration>

mapred-site.xml

configuration>
    property>
        name>mapreduce.framework.namename>
        value>yarnvalue>
    property>
configuration>

yarn-site.xml

configuration>
    property>
        name>yarn.nodemanager.aux-servicesname>
        value>mapreduce_shufflevalue>
    property>
    property>
        name>yarn.nodemanager.aux-services.mapreduce.shuffle.classname>
        value>org.apache.hadoop.mapred.ShuffleHandlervalue>
    property>
configuration>

4、接下来处理一个环境变量的问题，进入到etc\hadoop目录下，编辑hadoop-env.cmd 修改JAVA_HOME目录为你自己的jdk的路径；注意，如果路径中安装在Program Files目录下，名称用\PROGRA~1\，否则中间的空格会导致路径失效。

5、进入到bin目录，运行hdfs namenode -format

6、进入sbin目录：start-all.cmd

上一篇：windows Server Backup使用方法

下一篇：使用SoapUI测试windows身份验证的webservice

文章来自：搜素材网的编程语言模块，转载请注明文章出处。
文章标题：windows 下安装和运行 hadoop
文章链接：http://soscw.com/index.php/essay/56554.html

亲，登录后才可以留言！

windows 下安装和运行 hadoop

评论

热门文章

推荐文章

最新文章

置顶文章