本文目录导读:
准备工作
在开始安装Hadoop之前,我们需要做好以下准备工作:
1、准备一台虚拟机,操作系统为Linux(推荐使用CentOS 7)。
2、安装VMware或VirtualBox等虚拟机软件。
3、下载Hadoop的安装包(推荐使用Hadoop 3.3.4版本)。
图片来源于网络,如有侵权联系删除
4、确保虚拟机的网络配置正确,可以访问互联网。
安装Java
Hadoop需要Java环境,因此我们需要在虚拟机中安装Java。
1、下载Java安装包(推荐使用OpenJDK 8)。
2、解压安装包到指定目录(/usr/local/)。
3、编辑环境变量文件:vi /etc/profile。
4、在文件末尾添加以下内容:
export JAVA_HOME=/usr/local/jdk1.8.0_291 export PATH=$PATH:$JAVA_HOME/bin
5、保存文件并退出,然后使用source命令使环境变量生效:
source /etc/profile
6、检查Java版本:
java -version
如果输出正确,则表示Java安装成功。
图片来源于网络,如有侵权联系删除
安装Hadoop
1、解压Hadoop安装包到指定目录(/usr/local/)。
2、编辑环境变量文件:vi /etc/profile。
3、在文件末尾添加以下内容:
export HADOOP_HOME=/usr/local/hadoop-3.3.4 export PATH=$PATH:$HADOOP_HOME/bin
4、保存文件并退出,然后使用source命令使环境变量生效:
source /etc/profile
5、配置Hadoop环境变量:
cd $HADOOP_HOME/etc/hadoop
6、编辑hadoop-env.sh文件,添加以下内容:
export JAVA_HOME=/usr/local/jdk1.8.0_291
7、配置Hadoop核心配置文件:
(1)编辑core-site.xml文件,添加以下内容:
<configuration> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property> </configuration>
(2)编辑hdfs-site.xml文件,添加以下内容:
图片来源于网络,如有侵权联系删除
<configuration> <property> <name>dfs.replication</name> <value>1</value> </property> </configuration>
8、格式化HDFS文件系统:
hdfs namenode -format
9、启动Hadoop守护进程:
(1)启动NameNode:
start-dfs.sh
(2)启动ResourceManager:
start-yarn.sh
10、测试Hadoop是否安装成功:
在浏览器中访问以下地址,如果显示Hadoop Web界面,则表示安装成功:
http://localhost:50070
本文详细介绍了在虚拟机中安装Hadoop的步骤,包括准备工作、安装Java、安装Hadoop以及配置环境变量等,通过本文的指导,您应该能够成功安装并配置Hadoop环境,在实际应用中,您可以根据自己的需求调整Hadoop的配置,以充分发挥其性能。
标签: #虚拟机安装hadoop安装详细步骤
评论列表