一. Hadop 安装
- 从 http://archive.apache.org/dist/hadoop/core/ com这篇文章是我们对2011年埃及抗争特别报导的一部分。下载二进制压缩机文件: Hadoop-3.你也可以从我的云中得到它:链接: Hadoop-3.0.0 解压缩代码: f5kq PS: 要理解压力成功, 请看这里 。因此,最好作为管理人执行减压程序。
- 从 https://github.com/steveloughran/winutils 下载 Windows (Hadoop-3) 的Hardop 修正器。 图片来自Flickr用户pic. https://github.com/steveloughran /winutils /tree /master/hadoop-3.0.0 ）。如果 Git 工具不被用于下载文件,您可以直接下载软件包文件 。 https://github.com/steveloughran/winutils/archive/master.zip ，然后解压。你也可以从我的云中提取这个链接: winutils-master 8 8 8 8 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 8 6 8 6 8 6 8 6 8 8 6 8 8 8 6 8 8 6 8 8 6 8 8 8 6 8 8 6 8 8 6 8 8 6 8 8 6 8 8 6 8 8 6 8 8 8 6 8 6 8 8 6 8 8 8 8 8 6 8 6 8 6 8 6 8 8 6 8 6 8 8 6 8 6 8 8 6 8 6 8 8 8 6 8 8 6 8 6 8 8 8 6 8 8 8 8 6 8 6 8 8 8 6 8 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8 6 8
- 确定 JDK 1 是否正确安装在您的计算机上。 超过 8 Java 创建并运行环境 。 (通过执行命令行的 java- version 指令可以完成验证 。 )
- comI'm not sure what you mean, tar. Gz未插入到 C: Hadop子目录(可能根据自己的口味改变) PS:未插入以避免困难。请将降压文件的名称更改为 hadoop 。由Flickr用户pic.twitter.comimage 由Flickr用户pic.
- 添加环境变量 HADEOOP_HOME( 系统变量), 其值为“ C: Hadoop” 到环境 。 (设定方法: 转到控制面板系统和安全系统, 然后转到高级系统设置, 最后转到环境变量( N) 按钮 。)
- 检查 JAVA_ HOME 变量值是否准确 。 (在他的个人电脑上, JAVA_ HOME 设置为 C: 应用程序文件 Javajdk1. Eight.
- 路径“ C: Hadoopsbin” 和“ C: Hadopin” 被添加到路径环境变量中 。
- 复制并粘贴在 C. xml 中的 Hadopethadodoopcore- site. xml 文件 :
值得注意的是,两个设置之间的材料被复制 并粘贴在原始文件的两种配置之间。
fs.defaultFS
hdfs://localhost:9000
9. 将以下代码复制并粘贴到Hadopethadoopmapred-site.xml档案中:
mapreduce.framework.name
yarn
10. 在C:Hadoop目录中创建“数据”子目录;
在 C: Hadoopdata 目录中制作“ 命名” 子目录;
“ 恶魔” 文件夹是在 C: Hadoopdata 路径下创建的 。
11.Copy和粘贴以下成C:Hadopethadodoopydfs-site.xml:
dfs.replication
1
dfs.namenode.name.dir
file:///C:/hadoop/data/namenode
dfs.datanode.data.dir
file:///C:/hadoop/data/datanode
12.Copy和粘贴以下成C:Hadopethadoopyarn-site.xml:
yarn.nodemanager.aux-services
mapreduce_shuffle
yarn.nodemanager.auxservices.mapreduce.shuffle.class
org.apache.hadoop.mapred.ShuffleHandler
这篇文章是人权监察站特别报导的一部分。
“set JAVA_HOME=%JAVA_HOME%”
将“JAVA_HOME=C:PROGRA1 Javajdk1.Eight.0_192”改为“JAVA_HOME=C:PROGRA1 Javajdk1.Eight.0_192”。
（PS：此处有坑。若要在 cmd 中使用hi-env. JAVA_HOME, 请确认设置为“ C: Programfiles Javajdk1.将会出错，因为空间是不允许进入的因此,您应该确保您的文件路径都使用英文。还不能有空格。今后在确定环境变量时,也应遵循这一想法。
14.C:删除哈多平目录中的所有内容。
由Flickr用户Pic. Twitter. com 将“On in”目录的内容转至“C:Hadopin”目录。
(二) 测试哈多普是否成功。
哈多普的安装在前15个阶段后完成。
看看Hadop是否正常工作,请使用以下命令:
- 命令“ hdfs namenode-format” 用于最初格式化 HDFS 分布式文件系统。 如果它成功, 将出现下列情况:
在此行* 下检查是否存在问题, 如果存在问题, 请复制粘贴查询 。
2, 前往“ C: Hadoopsbin” 目录, 并执行“ 启动数据” 程序 。如果一切正常，将启动“ hdfs namenode” 和“ hdfs datanode” 进程 。它只有一个主节点和一个“HDFS分布式文件系统群集”组成。HDFS系统可在http://localhost:9870上查阅。正常启动后, HDFS 分发文件出现( 可以通过所有 Jvm 相关进程的jps 命令进行检查) 。“ hadoop fs” 或“ hdfs” 命令可用于“ 浏览目录 ” 、 “ 创建子目录 ” 、 “ 删除子目录 ” 、 “ 创建文件 ” 、 “ 创建子目录 ” 、 “ 创建文件 ” 、 “ 复制文件 ” 、 “ 移动子目录 或文件 ” 、 “ 查看文件内容 ” 、 “ 删除文件 ” 、 “ 下载本地文件 ” 等。 在网络化的文件系统中, “ 创建本地文件 ” 等。
hadoop fs**–**ls /
显示根目录中的所有文件和文件夹 。
hadoop fs –mkdir /test
制作子目录**/测试**、多级目录**和更多**-**p
hadoop fs -rm /test1.txt
删除文件
hadoop fs -rm -r /test
删除子目录(**-r** 参数待增加)**
hadoop fs -put C: mp est.txt est
本地文件应上传到 HDFS 分布式文件系统 。
hadoop fs -cat est est.txt
查看文件内容
hadoop fs -cp URI [URI …]
cp复制系统内文件
hadoop fs -get[-ignorecrc] [-crc]
下载文件到本地
hadoop fs -mv URI [URI …]
将文件从源路径传输到目标路径
hadoop fs -du URI [URI …]
显示文件大小
三. 要查看和操作HDFS分发的文件系统,请访问http://localhost:9870,并从“用途”菜单中选择“浏览文件系统”。
四. 转到 " C:Hadoopsbin " 目录,执行命令 " stop-dfs " 以终止HDFS分布式文件系统。
如果你相信这是个好主意,就去做吧!