本文目录导读：
图片来源于网络，如有侵权联系删除
在当今的大数据时代，Hadoop作为一款开源的大数据处理框架，已经成为处理海量数据不可或缺的工具，本文将为您详细解析在虚拟机环境中安装Hadoop的步骤，让您轻松上手Hadoop的部署与配置。
准备工作
1、准备一台虚拟机，推荐操作系统为CentOS 7。
2、确保虚拟机的网络连接正常，以便后续进行集群搭建。
3、下载Hadoop安装包，推荐下载与虚拟机操作系统版本相对应的Hadoop版本。
安装步骤
1、解压Hadoop安装包
将下载的Hadoop安装包解压到虚拟机的指定目录，
tar -zxvf hadoop-3.3.4.tar.gz -C /opt/hadoop
2、配置环境变量
编辑~/.bashrc文件，添加以下内容：
export HADOOP_HOME=/opt/hadoop/hadoop-3.3.4 export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
执行以下命令使环境变量生效：
source ~/.bashrc
3、配置Hadoop配置文件
图片来源于网络，如有侵权联系删除
进入Hadoop的配置目录：
cd $HADOOP_HOME/etc/hadoop
（1）配置hadoop-env.sh
编辑hadoop-env.sh文件，设置Java安装路径：
export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.292.x86_64
（2）配置core-site.xml
编辑core-site.xml文件，设置Hadoop运行时的一些基本参数：
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/opt/hadoop/data/tmp</value>
</property>
</configuration>（3）配置hdfs-site.xml
编辑hdfs-site.xml文件，设置HDFS存储参数：
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
<property>
<name>dfs.namenode.name.dir</name>
<value>/opt/hadoop/data/hdfs/namenode</value>
</property>
<property>
<name>dfs.datanode.data.dir</name>
<value>/opt/hadoop/data/hdfs/datanode</value>
</property>
</configuration>（4）配置yarn-site.xml
编辑yarn-site.xml文件，设置YARN运行时的一些基本参数：
<configuration>
<property>
<name>yarn.resourcemanager.host</name>
<value>localhost</value>
</property>
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
</configuration>4、格式化HDFS
图片来源于网络，如有侵权联系删除
在Hadoop配置文件配置完成后，需要格式化HDFS文件系统，执行以下命令：
hdfs namenode -format
5、启动Hadoop服务
启动Hadoop服务前，确保所有服务进程都已在后台运行：
start-dfs.sh start-yarn.sh
6、测试Hadoop安装
在终端执行以下命令，检查Hadoop是否正常运行：
jps
如果出现NameNode、SecondaryNameNode、DataNode和ResourceManager进程，则说明Hadoop安装成功。
通过以上步骤，您已经成功在虚拟机环境中安装了Hadoop，您可以继续学习Hadoop的高级应用，例如Hive、Spark等，以便更好地利用Hadoop处理海量数据，祝您学习愉快！
标签： #虚拟机安装hadoop步骤
评论列表