zoukankan      html  css  js  c++  java
  • hadoop2的高可用性

    1   hadoop2  namenode由一个节点变成两个节点,同时在线,且同时只有一个是活跃的,如果一个出了问题,另外一个立即接替;没必要配置Secondary NameNode、CheckpointNode、BackupNode,如果配置还会出错

    2   资源管理和应用程序管理分开, 应用程序由ASM--AM--TASK管理, 资源由RM--NM管理,减少出现问题的概率;

    3   在hadoop1中,才用共享存储的方案,两个master, 可以采用NFS, ZOONKEEper等进行同步, 采用了zookeeper进行同步,出现问题,进行切换,同时进行管理,使得同一时刻只有一个master是active master.

         在hadoop2中,rm成为主要的可用性瓶颈, 系统采用保存应用程序的基本信息和失败实例等信息, 如果rm失败,重启以后,将这些信息加载到内存中,同时接受NM和AM的心跳信息,进行判断,如果有误,则重启。当AM失败后,由ASM重启,当NM达到一定时间没有心跳发送的时候,会被认为已经失败,转移和重启。

    4   storm怎么样实现实时计算的? 如果保证它的稳定性的?

  • 相关阅读:
    Linux安装和配置java
    动态代理:JDK动态代理和CGLIB代理的区别
    常用算法复习
    Linux重新学习
    oracle复杂查询是sql
    oracle触发器
    oracle存储过程
    oracle数据库操作
    java知识回顾
    Spring AOP简述
  • 原文地址:https://www.cnblogs.com/kangls/p/3654677.html
Copyright © 2011-2022 走看看