hadoop怎样安装,hadoop 入门实例 张世龙 07-04 19:22 131次浏览
Hadoop入门(七) ——Hadoop安装(图文详解步骤2021 )文章传送门本系列文章传送门:
Hadoop入门(一) ——CentOS7下载VM安装(手动分区)字符步骤详情(2021 ) )。
Hadoop入门(2) ——VMware虚拟网络设置Windows10的IP地址设置CentOS静态IP设置(字符详细步骤2021 ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) )
Hadoop入门(3) ——XSHELL7远程访问工具XFTP7文件传输(字符步骤详情2021 ) )。
Hadoop入门(四) ——模板虚拟机环境准备(字符步骤详细信息2021 ) ) )。
Hadoop入门(五) ——Hadoop集群构建-克隆三台虚拟机(字符步骤详细信息2021 ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) )。
Hadoop入门(六) ——JDK安装(字符步骤详细信息2021 ) )。
Hadoop入门(七) ——Hadoop安装(文字详细步骤2021 ) ) ) ) ) ) ) ) ) ) ) )。
详细讲解Hadoop入门(八) ——本地运行模式完全分布式模式案例,实现WordCount和集群分发脚本xsync的快速环境变量配置(图文详细步骤2021 ) ) )。
Hadoop入门(九) ——SSH安全登录配置
Hadoop入门(十) ——集群结构(文字详细步骤2021 ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) )。
Hadoop入门(十一) ——集群崩溃的应对方法(文字详细步骤2021 ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) 652 )
Hadoop入门(十二) ——部署历史服务器及日志统计(文字详细步骤2021 ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) ) )。
Hadoop入门(十三) ——集群常见知识(面试问题)与技巧总结
Hadoop入门(多情的电话) ——集群时间同步(字符详细步骤2021 ) ) ) ) ) ) ) ) ) ) )
Hadoop入门(十五) ——集群常见错误及解决方案
文章目录Hadoop入门(七) )。 ——Hadoop安装(图片详细步骤2021 )在hadoop102上安装Hadoop1)使用XShell文件传输工具将hadoop-3.1.3.tar.gz传输到opt目录下的software 将放置在Hadoop安装软件包路径下的文件添加到/opt/在module下安装4 )验证解压是否成功5 )进入hadoop6)将Hadoop添加到环境变量6 )测试安装是否成功7 )重新启动)如果Hadoop命令无法重新启动虚拟机)扩展
在hadoop102上安装Hadoop
Hadoop下载地址: https://archive.Apache.org/dist/Hadoop/common/Hadoop-3.1.3 /
1 )使用XShell文件传输工具将hadoop-3.1.3.tar.gz导入opt目录下的software文件夹。 注意:虽然在上一篇文章中将hadoop与jdk一起导入,但是只要沿着上一篇文章一步一步地进行操作,就不需要到此为止了
2 )进入Hadoop安装包路径[ leok adia @ Hadoop 102 (] $ CD/opt/software /
3 )将安装文件解压缩到/opt/module下[ leok adia @ Hadoop 102 software ] $ tar-zxvf Hadoop-3.1.3.tar.gz-c/opt/mopt ]
4 )查看解压是否成功[ leok adia @ Hadoop 102 software ] $ ls/opt/module /
hadoop-3.1.3
5 )进入hadoop进入hadoop解冻位置
[ leok adia @ Hadoop 102 software ] $ CD .
[ leok adia @ Hadoop 102 opt ] $ CD module
[ leok adia @ Hadoop 102模式] $ ll
总用量0 drwxr-xr-x.9 leokadialeokadia 149月12日2019 Hadoop-3.1.3 drwxr-xr-x.7 leokadialeokadia 245月2日2019JDK1.8.0___
进入hadoop-3.1.3
[ leok adia @ Hadoop 102 module ] $ cdhadoop-3.1.3
6 )将Hadoop添加到环境变量(1)获取Hadoop安装路径
[ leok adia @ Hadoop 102 Hadoop-3.1.3 ] $ pwd
/opt/module/hadoop-3.1.3
)2)打开/etc/profile.d/my_env.sh文件
[ leok adia @ Hadoop 102 Hadoop-3.1.3 ] $ sudo vim/etc/profile.d/my _ env.sh
在my_env.sh文件的末尾添加以下内容: (shift g ) ) )。
# Hadoop _ homeexporthadoop _ home=/opt/module/Hadoop-3.1.3 export path=$ path : $ Hadoop _ home /心急如焚的溪流Export
)3)使修改后的文档生效
[ leok adia @ Hadoop 102 Hadoop-3.1.3 ] $ source/etc/profile
6 )测试安装是否成功[ leok adia @ Hadoop 102 Hadoop-3.1.3 ] $ Hadoop版本
Hadoop 3.1.3
7 )重新启动)如果Hadoop命令无法重新启动虚拟机(leokadia@Hadoop102Hadoop-3.1.3 ) $sudoreboot
扩展: Hadoop目录结构
1 )查看Hadoop目录结构(leokadia@Hadoop102Hadoop-3.1.3 ) $ll
总用量176 drwxr-xr-x.2 leokadialeokadia 1839月12日12 2019焦灼溪流drwxr-xr-x.3 leok adia leok adia 20 9月12日2019 etcdrwxr-xr-x.2 leokadiadia iaLeokAdia209月12日2019 libdrwxr-xr-x.4 leokadialeokadia 288月12日2019Libexec-rw-r-r 5月4日2019 license.txt-rw-rw-r w-rw-r--.1 leokadialeokadia 13669 leok adia leok adia 4096 9月12日2019s心急如焚的溪流drwxr-xr-x.4 leok adia leok adia 31 9月12日12 2019 share 2 :对Hadoop yarn, mapred (操作脚本)2)着急的溪流 目录:Hadoop配置文件目录,用于存储Hadoop的配置文件(3) 3358www.Sina.com)存储Hadoop