hadoop集群的启动与停止

网友投稿 289 2022-11-23

hadoop集群的启动与停止

@ 目录 单点启动 群起集群 查看是否启动成功 集群启动/停止方式总结   单点启动 如果集群是第一次启动,需要格式化NameNode hadoop namenode -format 在某一台机器上启动NameNode节点 hadoop-daemon.sh start namenode 在其他机器上启动DataNode节点 hadoop-daemon.sh start datanode 漫长的启动时间………… 思考:每次都一个一个节点启动,如果节点数增加到1000个怎么办?早上来了开始一个一个节点启动,到晚上下班刚好完成,下班? 群起集群 先配置各个节点之间的SSH免密登陆,请看我之前的文章:SSH实现免密登陆 配置slaves文件路径:$HADOOP_HOME/etc/hadoop/slaves在文件中增加以下内容: hadoop101 hadoop102 hadoop103 这些名称是我的三台机器的主机名,各位请改成自己的主机名!注意:该文件中添加的内容结尾不允许有空格,文件中不允许有空行。 如果集群是第一次启动,需要格式化NameNode,这里使用的命令是hdfs,不是单点启动时的hadoop hdfs namenode -format 启动HDFS start-dfs.sh 启动YARN start-yarn.sh 查看是否启动成功 web端查看SecondaryNameNode浏览器中输入:http://主机名或IP地址:50090/status.html 集群启动/停止方式总结 各个服务组件逐一启动/停止 分别启动/停止HDFS组件 hadoop-daemon.sh start / stop namenode / datanode / secondarynamenode 启动/停止YARN yarn-daemon.sh start / stop resourcemanager / nodemanager 各个模块分开启动/停止(配置ssh是前提)常用 整体启动/停止HDFS start-dfs.sh / stop-dfs.sh 整体启动/停止YARN start-yarn.sh / stop-yarn.sh HDFS、YARN同时启动、停止 start-all.sh / stop-all.sh

如果真的不知道做什么 那就做好眼前的事情吧 你所希望的事情都会慢慢实现...

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:解决HDFS上小文件的存储
下一篇:基于FPGA的RS232异步串行口IP核设计
相关文章

 发表评论

暂时没有评论,来抢沙发吧~