zoukankan      html  css  js  c++  java
  • 【Hadoop开发环境搭建】四、Hadoop集群启动

    四、Hadoop集群启动

    在配置完成Hadoop集群后,我们可以手动启动集群及相关服务


    1.启动集群(在sbin目录下执行下面指令,如果集群是第一次启动可以用第一种,常用的启动方式是一个一个的守护进程启动):

    start-dfs.sh      //启动HDFS相关服务
    start-yarn.sh     //启动YARN相关服务
    mr-jobhistory-daemon.sh start historyserver  //启动日志相关服务
    start-all.sh    //直接启动全部服务

    2.关闭集群(在sbin目录下执行下面指令,两种方式均可)

    stop-yarn.sh    //关闭YARN相关服务
    stop-dfs.sh     //关闭HDFS相关服务
    mr-jobhistory-daemon.sh stop historyserver   //关闭日志相关服务
    stop-all.sh   //直接全部关闭服务

    3.小练习

    (1)集群启动的顺序是:①②③

        ①start-dfs.sh             ②start-yarn.sh          ③mr-jobhistory-daemon.sh start historyserver

        集群关闭的顺序是:②①③

        ①stop-dfs.sh             ②stop-yarn.sh          ③mr-jobhistory-daemon.sh stop historyserver

    (2)在(    )配置文件里可以修改文件块的副本数?

    答案:hdfs-site.xml;修改文件块的副本数是在hdfs-site.xml文件中设置,其中,dfs.replication配置了文件块的副本数,默认就是3个。

    (3)学习一下Linux的shell编程,编写脚本命令以简化启动和关闭集群

        参考:https://www.cnblogs.com/zhang-jun-jie/p/9266858.html

        启动集群

    #!/bin/bash
    
    /hadoop/hadoop-2.7.7/sbinstart-dfs.sh
    
    /hadoop/hadoop-2.7.7/sbinstart-yarn.sh
    
    /hadoop/hadoop-2.7.7/sbinmr-jobhistory-daemon.sh start historyserver

        关闭集群

    #!/bin/bash
    /hadoop/hadoop-2.7.7/sbin/stop-yarn.sh
    /hadoop/hadoop-2.7.7/sbin/stop-dfs.sh
    /hadoop/hadoop-2.7.7/sbin/mr-jobhistory-daemon.sh stop historyserver
    人生的奔跑不在于瞬间的爆发,而在于途中的坚持。
  • 相关阅读:
    系统设计的一些原则
    分层开发思想与小笼包
    工作与生活
    Microsoft .NET Pet Shop 4 架构与技术分析
    用人之道(二) 如何管理软件开发团队
    也谈很多开发人员的毛病
    《3S新闻周刊》第10期,本期策划:“超女”营销带来的启示
    浅析ArcIMS
    MapX的坐标问题
    应用ArcIMS构建GMap风格的地图应用
  • 原文地址:https://www.cnblogs.com/Nelsonblog/p/11794432.html
Copyright © 2011-2022 走看看