CentOS 8 中安装部署伪分布式模式Hadoop 系列文章:
CentOS 8 中安装部署伪分布式模式Hadoop 「1」
CentOS 8 中安装部署伪分布式模式Hadoop 「2」
CentOS 8 中安装部署伪分布式模式Hadoop 「3」
本文继续进行Hadoop 的安装部署过程。
一、格式化HDFS
对HDFS集群进行格式化,HDFS集群是用来存储数据的。
hdfs namenode -format
看到如下信息,表示格式化成功了。
//:: INFO common.Storage: Storage directory /usr/local/hadoop-/tmp/dfs/name has been successfully formatted.
如果格式化失败,则分析一下异常信息,进行解决。
二、启动HDFS和YARN
现在,我们可以启动HDFS和YARN服务了。
(1)启动HDFS
[root@centos- ~]# start-dfs.sh
Starting namenodes on [centos-]
centos-: starting namenode, logging to /usr/local/hadoop-/logs/hadoop-root-namenode-centos-.out
localhost: starting datanode, logging to /usr/local/hadoop-/logs/hadoop-root-datanode-centos-.out
Starting secondary namenodes [centos-]
centos-: starting secondarynamenode, logging to /usr/local/hadoop-/logs/hadoop-root-secondarynamenode-centos-.out
(2)启动YARN
[root@centos- ~]# start-yarn.sh
starting yarn daemons
starting resourcemanager, logging to /usr/local/hadoop-/logs/yarn-root-resourcemanager-centos-.out
localhost: starting nodemanager, logging to /usr/local/hadoop-/logs/yarn-root-nodemanager-centos-.out
(3)jps命令查看是否启动成功
[root@centos- ~]# jps -l
sun.tools.jps.Jps
org.apache.hadoop.hdfs.server.namenode.NameNode
org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode
org.apache.hadoop.yarn.server.resourcemanager.ResourceManager
org.apache.hadoop.yarn.server.nodemanager.NodeManager
org.apache.hadoop.hdfs.server.datanode.DataNode
访问WEB页面,HDFS和YARN集群都有相对应的WEB监控页面。
HDFS:http://:
YARN:http://:
也可以通过stop-all.sh 命令停止上述服务之后,通过start-all.sh命令启动HDFS和YARN服务,如图所示:
OK。这样搭建成功了。