• 【Hadoop开发环境搭建】四、Hadoop集群启动


    四、Hadoop集群启动

    在配置完成Hadoop集群后,我们可以手动启动集群及相关服务


    1.启动集群(在sbin目录下执行下面指令,如果集群是第一次启动可以用第一种,常用的启动方式是一个一个的守护进程启动):

    start-dfs.sh      //启动HDFS相关服务
    start-yarn.sh     //启动YARN相关服务
    mr-jobhistory-daemon.sh start historyserver  //启动日志相关服务
    start-all.sh    //直接启动全部服务

    2.关闭集群(在sbin目录下执行下面指令,两种方式均可)

    stop-yarn.sh    //关闭YARN相关服务
    stop-dfs.sh     //关闭HDFS相关服务
    mr-jobhistory-daemon.sh stop historyserver   //关闭日志相关服务
    stop-all.sh   //直接全部关闭服务

    3.小练习

    (1)集群启动的顺序是:①②③

        ①start-dfs.sh             ②start-yarn.sh          ③mr-jobhistory-daemon.sh start historyserver

        集群关闭的顺序是:②①③

        ①stop-dfs.sh             ②stop-yarn.sh          ③mr-jobhistory-daemon.sh stop historyserver

    (2)在(    )配置文件里可以修改文件块的副本数?

    答案:hdfs-site.xml;修改文件块的副本数是在hdfs-site.xml文件中设置,其中,dfs.replication配置了文件块的副本数,默认就是3个。

    (3)学习一下Linux的shell编程,编写脚本命令以简化启动和关闭集群

        参考:https://www.cnblogs.com/zhang-jun-jie/p/9266858.html

        启动集群

    #!/bin/bash
    
    /hadoop/hadoop-2.7.7/sbinstart-dfs.sh
    
    /hadoop/hadoop-2.7.7/sbinstart-yarn.sh
    
    /hadoop/hadoop-2.7.7/sbinmr-jobhistory-daemon.sh start historyserver

        关闭集群

    #!/bin/bash
    /hadoop/hadoop-2.7.7/sbin/stop-yarn.sh
    /hadoop/hadoop-2.7.7/sbin/stop-dfs.sh
    /hadoop/hadoop-2.7.7/sbin/mr-jobhistory-daemon.sh stop historyserver
    人生的奔跑不在于瞬间的爆发,而在于途中的坚持。
  • 相关阅读:
    Android连载7-动语添加碎片
    JavaScript连载6-转化为Number和Boolean类型、运算符
    Java连载111-timer定时器、反射机制概述
    用conda创建虚拟环境的一些常用命令
    Java内存分析
    Java语言中的Class类
    线程协作
    LeetCode刷题笔记第26题
    LeetCode刷题笔记第20题(括号匹配)
    LeetCode刷提笔记第1332题
  • 原文地址:https://www.cnblogs.com/Nelsonblog/p/11794432.html
Copyright © 2020-2023  润新知