逍遥手游网:为用户提供海量热门软件、游戏等手机资源下载服务!

装机必备热门标签玩游戏装软件BT游戏H5游戏看教程专题游戏盒子手机版

逍遥手游网

所在位置:首页 > 资讯教程 > 系统教程 >  > 详情

Win10安装Hadoop3.1.2教程图文

文章来源:网络作者:野仄发布时间:2026-05-27 18:58:14

360集合包
360集合包
360集合包,一键装机、快捷方便。
Ready由于工作学习需要很多用户需要在Win10系统下安装Hadoop,今天小编就详细分享下Win10中安装Hadoop的教程图文详细资料。


安装环境:

JDK 1.8
Windows10
Hadoop3.1.2

需要注意的是jdk版本不要过高,否则可能会带来问题

一、安装Hadoop步骤

官网下载Hadoop3.1.2 :下载地址

解压到自定义的文件夹,我这里选择我的路径

F:\Environment\hadoop-3.1.2\hadoop


 

配置环境变量

JAVA_HOME : F:\Environment\java\jdk1.8.0_181HADOOP_HOME : F:\Environment\hadoop-3.1.2\hadooppath添加 : %JAVA_HOME%\bin %JAVA_HOME%\jre\bin %HADOOP_HOME%\bin



检测是否安装成功

java -versionhadoop - version

出现以上信息说明安装成功 !

二、修改配置文件

1、需要修改的文件在解压后的目录下,F:\Environment\hadoop-3.1.2\hadoop\etc\hadoop



hadoop-env.cmd

用Notepad++ 打开hadoop-env.cmd文件找到**set JAVA_HOME=%JAVA_HOME%**一行,将其值修改为jdk所在目录如果目录带有空格,可以通过下面两种方式处理:这里以安装目录为C:\Program Files\Java\jdk1.8.0_181为例因为Program Files中存在空格,若是直接使用会出现错误,可以下面两种方式之一进行处理:只需要用PROGRA~1 代替Program Files,即改为C:\PROGRA~1\Java\jdk1.8.0_18或是使用双引号改为 “C:\Program Files”\Java\jdk1.8.0_181core-site.xml

fs.defaultFS hdfs://localhost:9000 mapred-site.xml

mapreduce.framework.name yarn yarn-site.xml

yarn.nodemanager.aux-services mapreduce_shuffle

yarn.nodemanager.aux-services.mapreduce.shuffle.class org.apache.hahoop.mapred.ShuffleHandler hdfs-site.xml

需要再hadoop解压的根目录下创建一个data文件夹,并在data下创建namenode和datanode两个子文件夹;

然后添加配置文件 :

dfs.replication 1

dfs.permissions false

dfs.namenode.name.dir /F:/Environment/hadoop-3.1.2/hadoop/data/namenode

fs.checkpoint.dir /F:/Environment/hadoop-3.1.2/hadoop/data/snn

fs.checkpoint.edits.dir /F:/Environment/hadoop-3.1.2/hadoop/data/snn

dfs.datanode.data.dir /F:/Environment/hadoop-3.1.2/hadoop/data/datanode

配置文件修改完毕 !

三、替换bin文件

下载的Hadoop不支持Windows系统,需要替换bin目录下的文件方便在Windows上运行。这也是掉坑来的地方了!!!!
在网上下载到的hadooponwindows-master.zip 以及winutils中应该是只适合hadoop 3.0.0及其以下,尝试过hadooponwindows-master.zip以及winutils中最高的版本3.0.0,启动hadoop都会出现下面的错误:Error starting NodeManager、UnsatisfiedError


折腾了好久(低版本的hadoop还没下载完毕),终于找到3.1.0版本winutils,下载后直接替换掉hadoop目录下bin文件即可:



复制yarn的jar包

可以看到resourcemanager.ResourceManager: Error starting ResourceManager启动失败的日志
报了类TimelineCollectorManager找不到的错误。

解决方法:
F:\Environment\hadoop-3.1.2\hadoop\share\hadoop\yarn\timelineservice
将这个文件夹下的hadoop-yarn-server-timelineservice-3.1.2.jar 包
复制到这个路径下 F:\Environment\hadoop-3.1.2\hadoop\share\hadoop\yarn 即可解决。
 

四、格式化HDFS文件系统

hdfs namenode -format

如果这一步没有什么异常基本没有问题了。

启动

进入hadoop的sbin目录我这里在 : F:\Environment\hadoop-3.1.2\hadoop\sbin# 启动# 会自动开启四个新的命令行窗口,窗口没打印异常即启动成功start-all# 停止stop-all# 查看正在运行的实例进程及端口jps

这四个窗口不能关闭 , 否则进程会结束



五、访问管理GUI

启动成功后,可以访问GUI页面

http://localhost:8088

http://localhost:9870

最后我们停止一下所有进程



写在最后:

运行结束后你会发现hadoop安装的磁盘根目录下多了一个tmp临时文件目录

里面有一些 Hadoop的缓存文件 ,不需要的话可以清理一下的。



以上就是这次Winwin7小编关于在Win10系统下安装Hadoop详细部分分享了,希望大家能喜欢哦。

End
复制本文链接资讯文章为逍遥手游网所有,未经允许不得转载。
热门游戏MORE+
相关资讯MORE+
最新录入
热门资讯
新游新品榜
手机游戏
休闲益智
赛车竞速
棋牌桌游
角色扮演
动作射击
体育竞技
经营养成
策略塔防
冒险解谜
音乐游戏
手游辅助
H5游戏
BT游戏
手机软件
社交聊天
系统工具
时尚购物
旅游出行
影音播放
生活实用
办公学习
资讯阅读
拍摄美化
游戏辅助
健康医疗
地图导航
小说漫画
安全防护
育儿亲子
手游下载
梦想三国之勇往直前0....
炼仙传说0.1折
不可思议的刀剑与魔法...
逍遥浪人
奇幻梦旅人
玄影0.1折
点击冒险之旅(0.1折特...
天神赵子龙0.1折
九州异兽记0.1折
龙魂魔法0.1折
装机软件
爱奇艺电脑版
Steam下载管家 2026最...
360游戏大厅
GoLink加速器
3DM驱动大师
夸克
豆包电脑版
360C盘扩容大师
360录屏
360极速浏览器
精选专题
手机游戏专题
手机软件专题
电脑软件专题
电脑游戏专题
游戏排行榜
手游排行榜
软件排行榜
BT排行榜
电脑软件排行榜
电脑游戏排行榜