(注:此搭建的hadoop HA只含有zookeeper,hadoop;若有其他组件,需按相应组件启动顺序。)
hadoop HA分布式集群搭建成功后一些首次启动需要格式化的步骤可以省略。
根据需要可只启动如下:
第一步:启动zookeeper
在安装zookeeper集群的主机的目录zookeeper-3.4.5/bin/分别启动
./zkServer.sh start
#查看状态:分别有leader,follower
./zkServer.sh status
第二部:启动HDFS
在namenode 主机上启动
start-dfs.sh
namenode启动nameNode进程和DFSZKFailoverController(zkfc)进程;zookeeper的集群上启动 journalnode进程;datanode上启动datanode进程
第二部:启动yarn
在安装ResourceManager的机器上启动
start-yarn.sh
ResourceManager上产生ResourceManager进程;nodemanager上产生 QuorumPeerMain进程。
启动完成后可通过指令测试集群工作状态 :
jps 查看各机器启动的服务
Hadoop一些常用指令命令:
bin/hdfs dfsadmin -report 查看hdfs的各节点状态信息
bin/hdfs haadmin -getServiceState nn1 获取一个namenode节点的HA状态
sbin/hadoop-daemon.sh start|stop namenode 单独启动|停止一个namenode进程
sbin/hadoop-daemon.sh start|stop secondarynamenode 单独启动|停止一个secondarynamenode进程
sbin/hadoop-daemon.sh start|stop datanode 单独启动|停止一个datanode进程
sbin/hadoop-daemon.sh start|stop zkfc 单独启动|停止一个zkfc进程
sbin/hadoop-daemon.sh start|stop journalnode 单独启动|停止一个journalnode进程
sbin/yarn-daemon.sh start|stop resourcemanager 单独启动|停止一个resourcemanager进程
sbin/yarn-daemon.sh start|stop nodemanager 单独启动|停止一个nodemanager进程
本文由傻鸟发布,不代表傻鸟立场,转载联系作者并注明出处:https://shaniao.net/jishu/13.html