admin 管理员组

文章数量: 887017

首先到官方下载官网的hadoop2.7.7,链接如下
https://mirrors.tuna.tsinghua.edu/apache/hadoop/common/

找网盘的hadooponwindows-master.zip
链接如下
https://pan.baidu/s/1vxtBxJyu7HNmOhsdjLZkYw
提取码：y9a4
把hadoop-2.7.7.tar.gz解压后
使用hadooponwindows-master的bin和etc替换hadoop2.7.7的bin和etc
配置JAVA_HOME

注意：安装Hadoop2.7.7
　　官网下载Hadoop2.7.7，安装时注意，最好不要安装到带有空格的路径名下，例如:Programe Files，否则在配置Hadoop的配置文件时会找不到JDK（按相关说法，配置文件中的路径加引号即可解决，但我没测试成功）。
配置HADOOP_HOME

path添加%HADOOP_HOME%in（win10不用分号或者如下编辑界面不用分号，其余加上 ；）


使用编辑器打开E:Hadoop2.7.7hadoop-2.7.7etchadoophadoop-env.cmd
修改JAVA_HOME的路径
把set JAVA_HOME改为jdk的位置
注意其中PROGRA~1代表Program Files
set JAVA_HOME=E:PROGRA~1Javajdk1.8.0_171

打开 hadoop-2.7.7/etc/hadoop/hdfs-site.xml
修改路径为hadoop下的namenode和datanode

dfs.replication
1

dfs.namenode.name.dir
/E:/Hadoop2.7.7/hadoop-2.7.7/data/namenode

dfs.datanode.data.dir
/E:/Hadoop2.7.7/hadoop-2.7.7/data/datanode

在E:Hadoop-2.7.7目录下 添加tmp文件夹
在E:/Hadoop2.7.7/hadoop-2.7.7/添加data和namenode，datanode子文件夹

还需要把hadoop.dll（从）拷贝到 C:WindowsSystem32


不然在window平台使用MapReduce测试时报错

以管理员身份打开命令提示符
输入hdfs namenode -format,看到seccessfully就说明format成功

转到Hadoop-2.7.3sbin文件下

输入start-all，启动hadoop集群

出现下面四个窗口表示启动hadoop集群成功



输入jps - 可以查看运行的所有节点

访问http://localhost:50070,访问hadoop的web界面

访问http://localhost:8088,访问yarn的web界面，有就表明已经成功

补充：停止运行的所有节点的命令为

本文标签： 全过程 环境 Windows Hadoop

版权声明：本文标题：Windows下配置Hadoop环境（全过程） 内容由网友自发贡献，该文观点仅代表作者本人， 转载请联系作者并注明出处：http://www.freenas.com.cn/jishu/1726532169h979753.html， 本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容，一经查实，本站将立刻删除。