zoukankan      html  css  js  c++  java
  • 033 关于YARN的HA

    一:准备

    1.规划

      namenode               namenode

      ZKFC        ZKFC

      journalnode          journalnode               journalnode

                  RM                              RM

      datanode        datanode        datanode

      nodemanager           nodemanager             nodemanager 

    2.结构

      依赖zookeeper进行存储的,同时可以故障自动转移。

      

    3.resourcemanager HA与namenode HA的区别

      在namenode HA是一个active,一个standby节点

      但是resourcemanager HA是一个active 和多个standby节点,如官网所说。

      

    二:配置

    2.配置yarn-site.xml

      删除原来的在第二台虚拟机上的RM配置

      

      配置新的内容

      

    3.分发

      

    三:开启服务

    4.开启服务

      

      

    5.管理页面

      

      

    四:检测程序

    6.上传文件到HDFS

      

    7.运行wordcount

    8.这时的active是第二台虚拟机,杀死resourcemanager,观察结果

      这时会发现第二台虚拟机停止,第三台虚拟机接着任务接着运行

      

      

      

  • 相关阅读:
    [Sql Server][原创]
    SQL Server T-SQL高级查询
    SQL 网文链接
    Epicor系统二次开发
    lambda表达式的变量作用域
    写一个正则表达式匹配手机号
    函数装饰器在类方法中的使用方法
    关于Django的session的使用 (装饰器版)
    Django ORM相关操作(2)
    Django ORM相关操作(1)
  • 原文地址:https://www.cnblogs.com/juncaoit/p/6015912.html
Copyright © 2011-2022 走看看