zoukankan      html  css  js  c++  java
  • 033 关于YARN的HA

    一:准备

    1.规划

      namenode               namenode

      ZKFC        ZKFC

      journalnode          journalnode               journalnode

                  RM                              RM

      datanode        datanode        datanode

      nodemanager           nodemanager             nodemanager 

    2.结构

      依赖zookeeper进行存储的,同时可以故障自动转移。

      

    3.resourcemanager HA与namenode HA的区别

      在namenode HA是一个active,一个standby节点

      但是resourcemanager HA是一个active 和多个standby节点,如官网所说。

      

    二:配置

    2.配置yarn-site.xml

      删除原来的在第二台虚拟机上的RM配置

      

      配置新的内容

      

    3.分发

      

    三:开启服务

    4.开启服务

      

      

    5.管理页面

      

      

    四:检测程序

    6.上传文件到HDFS

      

    7.运行wordcount

    8.这时的active是第二台虚拟机,杀死resourcemanager,观察结果

      这时会发现第二台虚拟机停止,第三台虚拟机接着任务接着运行

      

      

      

  • 相关阅读:
    Linux下修改Mysql的用户(root)的密码
    Mysql 用户权限管理
    mysql的四种启动方式
    MySQL慢日志的相关参数
    mysqlsla slow-query常用用法

    导包和模块注意的问题
    Python面向对象之魔法方法/双下方法
    __new__问题
    转:Python常见字符编码及其之间的转换
  • 原文地址:https://www.cnblogs.com/juncaoit/p/6015912.html
Copyright © 2011-2022 走看看