(16)hadoop 集群重启与停止

冷不防 2022-06-17 13:43 354阅读 0赞

Once all the necessary configuration is complete, distribute the files to the HADOOP\_CONF\_DIR directory on all the machines.

#### Hadoop Startup ####

To start a Hadoop cluster you will need to start both the HDFS and YARN cluster.

Format a new distributed filesystem:

$ $HADOOP_PREFIX/bin/hdfs namenode -format <cluster_name>

Start the HDFS with the following command, run on the designated NameNode:

$ $HADOOP_PREFIX/sbin/hadoop-daemon.sh --config $HADOOP_CONF_DIR --script hdfs start namenode

Run a script to start DataNodes on all slaves:

$ $HADOOP_PREFIX/sbin/hadoop-daemon.sh --config $HADOOP_CONF_DIR --script hdfs start datanode

Start the YARN with the following command, run on the designated ResourceManager:

$ $HADOOP_YARN_HOME/sbin/yarn-daemon.sh --config $HADOOP_CONF_DIR start resourcemanager

Run a script to start NodeManagers on all slaves:

$ $HADOOP_YARN_HOME/sbin/yarn-daemon.sh --config $HADOOP_CONF_DIR start nodemanager

Start a standalone WebAppProxy server. If multiple servers are used with load balancing it should be run on each of them:

$ $HADOOP_YARN_HOME/sbin/yarn-daemon.sh start proxyserver --config $HADOOP_CONF_DIR

Start the MapReduce JobHistory Server with the following command, run on the designated server:

$ $HADOOP_PREFIX/sbin/mr-jobhistory-daemon.sh start historyserver --config $HADOOP_CONF_DIR

#### Hadoop Shutdown ####

Stop the NameNode with the following command, run on the designated NameNode:

$ $HADOOP_PREFIX/sbin/hadoop-daemon.sh --config $HADOOP_CONF_DIR --script hdfs stop namenode

Run a script to stop DataNodes on all slaves:

$ $HADOOP_PREFIX/sbin/hadoop-daemon.sh --config $HADOOP_CONF_DIR --script hdfs stop datanode

Stop the ResourceManager with the following command, run on the designated ResourceManager:

$ $HADOOP_YARN_HOME/sbin/yarn-daemon.sh --config $HADOOP_CONF_DIR stop resourcemanager

Run a script to stop NodeManagers on all slaves:

$ $HADOOP_YARN_HOME/sbin/yarn-daemon.sh --config $HADOOP_CONF_DIR stop nodemanager

Stop the WebAppProxy server. If multiple servers are used with load balancing it should be run on each of them:

$ $HADOOP_YARN_HOME/sbin/yarn-daemon.sh stop proxyserver --config $HADOOP_CONF_DIR

Stop the MapReduce JobHistory Server with the following command, run on the designated server:

$ $HADOOP_PREFIX/sbin/mr-jobhistory-daemon.sh stop historyserver --config $HADOOP_CONF_DIR

发表评论取消回复

表情：

评论列表（有 0 条评论，354人围观）

还没有评论，来说两句吧...

相关阅读

相关 shell脚本监控hadoop集群，实现集群组件宕机重启

一、实现原理 > jps取角色的端口号，如果存在则跳过，否则启动角色，并把日志打印，记录角色重启记录。 clusterMonitor.sh（主节点） !/bi

短命女/ 2023年02月16日 04:06/ 0 赞/ 68 阅读

相关重启kafka集群

重启kafka nohup bin/kafka-server-start.sh config/server.properties & 重启zookeeper

柔光的暖阳◎/ 2022年11月17日 05:21/ 0 赞/ 225 阅读

相关 Activity 的停止与重启

停止与重启Activity > > 恰当的停止与重启我们的activity是很重要的，在activity生命周期中，他们能确保用户感知到程序的存在并不会丢失他们

Love The Way You Lie/ 2022年09月26日 01:57/ 0 赞/ 171 阅读

相关 redis-集群重启

关闭目前redis-trib的功能还比较弱，需要重启集群的话先手动kill掉各个进程，然后重新启动就可以了注意这样可能会出现问题 \[root@T1 redis-3.

港控/mmm°/ 2022年08月23日 04:55/ 0 赞/ 164 阅读

相关集群临时重启

集群节点临时重启当修改配置时可能需要重启集群才生效，或者集群发生严重错误无法恢复时都可能需要重启集群一个集群节点重启前要先临时禁用自动分配，设置cluster.r

小灰灰/ 2022年08月05日 16:20/ 0 赞/ 151 阅读

相关 (16)hadoop 集群重启与停止

Once all the necessary configuration is complete, distribute the files to the HADOOP\_CO

冷不防/ 2022年06月17日 13:43/ 0 赞/ 355 阅读

相关 Mysql集群重启失败

问题描述今天遇到一个问题，openstack集群的3个控制节点内存故障后，同事重启了三个机器，启动后，三个节点上的mysqld(其实就是mariadb)服务都起不来了

今天药忘吃喽~/ 2022年06月07日 07:36/ 0 赞/ 559 阅读

相关 Redis docker集群重启

当我们关闭虚拟机时，而虚拟机上有6个redis集群，这是redis集群也就全部关闭了，那么如何重新启动redis集群呢？首先严谨起见，我们启动其中一个redis节点 d

你的名字/ 2022年05月08日 19:10/ 0 赞/ 546 阅读

相关 mysql 5.7.23 集群服务停止后重启

安装过程省。。。官方文档连接:[https://dev.mysql.com/doc/refman/5.7/en/mysql-innodb-cluster-productio

谁践踏了优雅/ 2022年05月07日 19:33/ 0 赞/ 257 阅读

相关 mysql 5.7.23 集群服务停止后重启

安装过程省。。。官方文档连接:[https://dev.mysql.com/doc/refman/5.7/en/mysql-innodb-cluster-productio

r囧r小猫/ 2022年05月07日 05:56/ 0 赞/ 162 阅读