专注于 JetBrains IDEA 全家桶,永久激活,教程
持续更新 PyCharm,IDEA,WebStorm,PhpStorm,DataGrip,RubyMine,CLion,AppCode 永久激活教程

hadoop集群的启动与停止

@

目录

  • 单点启动
  • 群起集群
  • 查看是否启动成功
  • 集群启动/停止方式总结

单点启动

1、 如果集群是第一次启动,需要格式化NameNode

hadoop namenode -format

1、 在某一台机器上启动NameNode节点

hadoop-daemon.sh start namenode

1、 在其他机器上启动DataNode节点

hadoop-daemon.sh start datanode

漫长的启动时间…………

思考:每次都一个一个节点启动,如果节点数增加到1000个怎么办?
早上来了开始一个一个节点启动,到晚上下班刚好完成,下班?

群起集群

1、 先配置各个节点之间的SSH免密登陆,请看我之前的文章:
SSH实现免密登陆
2、 配置slaves
文件路径:$HADOOP_HOME/etc/hadoop/slaves
在文件中增加以下内容:

hadoop101
hadoop102
hadoop103

这些名称是我的三台机器的主机名,各位请改成自己的主机名!
注意:该文件中添加的内容结尾不允许有空格,文件中不允许有空行。

1、 如果集群是第一次启动,需要格式化NameNode,这里使用的命令是hdfs,不是单点启动时的hadoop

hdfs namenode -format

1、 启动HDFS

start-dfs.sh

1、 启动YARN

start-yarn.sh

查看是否启动成功

web端查看SecondaryNameNode
浏览器中输入:http://主机名或IP地址:50090/status.html

集群启动/停止方式总结

1、 各个服务组件逐一启动/停止

  • 分别启动/停止HDFS组件
hadoop-daemon.sh  start / stop  namenode / datanode / secondarynamenode

  • 启动/停止YARN
yarn-daemon.sh  start / stop  resourcemanager / nodemanager

1、 各个模块分开启动/停止(配置ssh是前提)常用

  • 整体启动/停止HDFS
start-dfs.sh   /  stop-dfs.sh

  • 整体启动/停止YARN
start-yarn.sh  /  stop-yarn.sh

1、 HDFS、YARN同时启动、停止

start-all.sh  /  stop-all.sh

文章永久链接:https://tech.souyunku.com/21749

未经允许不得转载:搜云库技术团队 » hadoop集群的启动与停止

JetBrains 全家桶,激活、破解、教程

提供 JetBrains 全家桶激活码、注册码、破解补丁下载及详细激活教程,支持 IntelliJ IDEA、PyCharm、WebStorm 等工具的永久激活。无论是破解教程,还是最新激活码,均可免费获得,帮助开发者解决常见激活问题,确保轻松破解并快速使用 JetBrains 软件。获取免费的破解补丁和激活码,快速解决激活难题,全面覆盖 2024/2025 版本!

联系我们联系我们