Hadoop windows本地环境安装
来源:http://www.tudoupe.com时间:2022-04-04
因为哈多普建在爪哇, 安装在Windows上, 就像安装爪哇一样, 需要设置环境变量。
一、下载所需文件
- JDK 下载位置, jdk1.8 下载
- Hadoop 下载, hashoop 下载, 搜索版本, 然后点击 Binary 下载按钮下载本地 。
- 下载和安装 Hadoop Windows 环境构建器, Winutils, 并发布
二、安装文件
- 安装jdk 并不难, 但此处没有深度覆盖。 我的安装目录是 C: Program 文件 Javajdk 1. 8. 0_ 151 。
- 因为下载的 Hadoop 文件尚未安装, 我们只需要切断 D:hadoophadoop-3. 1 的可解压缩目录 D: hanoophadoop-3. 1 。

三、环境变量配置


- 这里没有几个 jdk 环境变量设置 。
- 哈多普环境变量的安装方式与爪哇环境变量的安装方式相同。

创建一个新的 D:hadoophadop-3. 1. 1 变量的 HADEOOP_ HOME 变量 。

下一步, 在路径变量值中添加% HADOOP_ HOME% ; 这将配置环境变量 handoop 。
四. 建立Haddoop 文件
等 D : hadoophadop-3 类型在 Hadoop 目录中 。 1 1. etchetadoop 发现了 core- site. xml 文件, 并用编辑器打开了它, 以便插入以下内容 。
hadoop.tmp.dir /D:/hadoop/workspace/tmp dfs.name.dir /D:/hadoop/workspace/name fs.default.name hdfs://localhost:9000我正在寻找一个地图地点. xml 文件, 我可以打开并粘贴以下文件 。
mapreduce.framework.name yarn mapred.job.tracker hdfs://localhost:9001打开 hdfs- site. xml 文件, 并粘贴以下文件 。
dfs.replication 1 dfs.data.dir /D:/hadoop/workspace/data打开日记点. xml 文件, 并粘贴以下文件 。
yarn.nodemanager.aux-services mapreduce_shuffle yarn.nodemanager.aux-services.mapreduce.shuffle.class org.apache.hadoop.mapred.ShuffleHandler以@rem 移除 JAVA_HOME, 修改通往JAVA_HOME的路径,
这里有一个错误,因为我把Jdk放进程序文件目录的C号机, 这个文件夹里有一个空间, 我会在那里犯一个错误。
因此,在这种情况下,我们用PROGRA1取代它。
五、替换文件
解锁我们先前下载的 winutils- master 文件 。我们想出了我们自己的版本。我正在寻找 D:hadopwinutils- Masterhadop- 3. 。 由 Flickr 用户 Pic. twitter. com0 提供图片, 将文件夹副本中的文件夹替换为全文件夹文件的文件夹, 然后将文件夹替换为文件夹文件夹的文件夹 。D: hadoophadoop-3. 一.1是下面的垃圾箱。
六、运行
一. 打开 cmd 窗口并键入 hdfs 命名node-format 。
打开 CD 窗口, 浏览到 hadoop sbin 目录, 并输入启动- all. Cmd, 这将激活以下四个进程窗口 。



七、上传测试
您可通过下列方式访问 hdfs: hdfs://localhost: 9,00, 根据您的核心站点. xml 设置 。
1.创建输入目录
运行以下命令: Hadoop fs-mkdir hdfs://localhost: 9,00/user
hadoop fs -mkdir hdfs://localhost:9000/user/wcinput
2.上传数据到目录
Hadoop fs-put D: 个人调试。 Blog hdfs://localhost: 900/user/wcinput
hadoop fs -put D:personalwaz.txt hdfs://localhost:9000/user/wcinput
3.查看文件
键入以下命令: Hadoop fs- ls hdfs://localhost: 900/user

QA常见问题:
1: Hadoop的起始点可能表明,由于在空格中读取 JAVA_HOME 环境变量, JAVA_HOME 路径无法识别。
2: Hadoop 提醒因一个未配置的 Hadoop 环境变量而启用; 请检查 Hadoop 环境变量设置 。
哈多普自己的网球控制台(Hadoop)自己的网球控制台(BEFFHH)
一. 资源管理图形用户界面:http://localhost:8088/;

二. 节点管理用户界面:http://localhost:50070/

相关新闻
- 2022-08-04 WPF的由来
- 2022-08-04 Win11勒索软件防护怎么打开?Win11安
- 2022-08-04 Windows系统jdk的配置
- 2022-08-04 Windows10 OneNote怎么重新登录?如何重
- 2022-08-04 超好用的 Windows 效率工具推荐
- 2022-08-04 Windows如何在CMD或PowerShell中配置代理
- 2022-08-04 powershell和cmd对比
- 2022-08-04 【QT】Windows下QT下载安装
- 2022-08-04 windows下 C++ 实现类属性的get和set方
- 2022-08-04 Win11快速助手在哪里?Win11打开快速
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
