hadoop伪分布式搭建没有namenode，Hadoop伪分布式搭建攻略，无需NameNode的简易实践教程

本文目录导读：

1. 环境准备
2. 搭建步骤

Hadoop作为一款强大的分布式计算框架，被广泛应用于大数据领域，在搭建Hadoop集群时，通常会采用伪分布式模式，以方便学习和测试，本文将详细介绍如何在无需NameNode的情况下搭建Hadoop伪分布式环境。

环境准备

1、操作系统：Linux系统，如CentOS 7、Ubuntu 18.04等。

2、Java环境：Hadoop需要Java环境，确保Java版本与Hadoop兼容。

3、Hadoop版本：本文以Hadoop 3.2.1为例。

图片来源于网络，如有侵权联系删除

4、网络环境：确保集群节点间网络畅通。

搭建步骤

1、安装Java环境

（1）下载Java安装包，如jdk-8u231-linux-x64.tar.gz。

（2）解压安装包，如tar -zxvf jdk-8u231-linux-x64.tar.gz。

（3）配置环境变量，编辑/etc/profile文件，添加以下内容：

export JAVA_HOME=/usr/local/java/jdk1.8.0_231
export PATH=$PATH:$JAVA_HOME/bin

（4）使环境变量生效，执行source /etc/profile。

2、安装Hadoop

（1）下载Hadoop安装包，如hadoop-3.2.1.tar.gz。

图片来源于网络，如有侵权联系删除

（2）解压安装包，如tar -zxvf hadoop-3.2.1.tar.gz。

（3）配置Hadoop环境变量，编辑etc/hadoop/hadoop-env.sh文件，添加以下内容：

export JAVA_HOME=/usr/local/java/jdk1.8.0_231

3、配置Hadoop配置文件

（1）编辑etc/hadoop/core-site.xml文件，添加以下内容：

<configuration>
  <property>
    <name>fs.defaultFS</name>
    <value>hdfs://localhost:9000</value>
  </property>
  <property>
    <name>hadoop.tmp.dir</name>
    <value>/usr/local/hadoop-3.2.1/tmp</value>
  </property>
</configuration>

（2）编辑etc/hadoop/hdfs-site.xml文件，添加以下内容：

<configuration>
  <property>
    <name>dfs.replication</name>
    <value>1</value>
  </property>
</configuration>

4、格式化文件系统

（1）在Hadoop命令行中执行以下命令，格式化文件系统：

hdfs namenode -format

（2）如果出现错误，检查dfs.replication配置是否正确。

图片来源于网络，如有侵权联系删除

5、启动Hadoop服务

（1）启动HDFS：

start-dfs.sh

（2）启动YARN：

start-yarn.sh

6、测试Hadoop服务

（1）在浏览器中访问http://localhost:50070，查看HDFS Web UI。

（2）在浏览器中访问http://localhost:8088，查看YARN Web UI。

本文详细介绍了在无需NameNode的情况下搭建Hadoop伪分布式环境的方法，通过以上步骤，您可以快速搭建一个简易的Hadoop集群，为后续学习和测试大数据应用打下基础，在实际生产环境中，建议采用全分布式模式，以确保集群的稳定性和性能。

标签： #hadoop伪分布式的搭建