centos8os搭配hadoop centos部署hadoop

CentOS 8 中安装部署伪分布式模式Hadoop 「4」

CentOS 8 中安装部署伪分布式模式Hadoop 系列文章:

CentOS 8 中安装部署伪分布式模式Hadoop 「1」

CentOS 8 中安装部署伪分布式模式Hadoop 「2」

CentOS 8 中安装部署伪分布式模式Hadoop 「3」

本文继续进行Hadoop 的安装部署过程。


一、格式化HDFS

对HDFS集群进行格式化,HDFS集群是用来存储数据的。 

hdfs namenode -format


看到如下信息,表示格式化成功了。

//:: INFO common.Storage: Storage directory /usr/local/hadoop-/tmp/dfs/name has been successfully formatted.

如果格式化失败,则分析一下异常信息,进行解决。


二、启动HDFS和YARN

现在,我们可以启动HDFS和YARN服务了。

(1)启动HDFS

[root@centos- ~]# start-dfs.sh
Starting namenodes on [centos-]
centos-: starting namenode, logging to /usr/local/hadoop-/logs/hadoop-root-namenode-centos-.out
localhost: starting datanode, logging to /usr/local/hadoop-/logs/hadoop-root-datanode-centos-.out
Starting secondary namenodes [centos-]
centos-: starting secondarynamenode, logging to /usr/local/hadoop-/logs/hadoop-root-secondarynamenode-centos-.out

(2)启动YARN

[root@centos- ~]# start-yarn.sh
starting yarn daemons
starting resourcemanager, logging to /usr/local/hadoop-/logs/yarn-root-resourcemanager-centos-.out
localhost: starting nodemanager, logging to /usr/local/hadoop-/logs/yarn-root-nodemanager-centos-.out

(3)jps命令查看是否启动成功

[root@centos- ~]# jps -l
 sun.tools.jps.Jps
 org.apache.hadoop.hdfs.server.namenode.NameNode
 org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode
 org.apache.hadoop.yarn.server.resourcemanager.ResourceManager
 org.apache.hadoop.yarn.server.nodemanager.NodeManager
 org.apache.hadoop.hdfs.server.datanode.DataNode


访问WEB页面,HDFS和YARN集群都有相对应的WEB监控页面。

HDFS:http://:



YARN:http://:


也可以通过stop-all.sh 命令停止上述服务之后,通过start-all.sh命令启动HDFS和YARN服务,如图所示:


OK。这样搭建成功了。

原文链接:,转发请注明来源!