zoukankan      html  css  js  c++  java
  • 4 weekend110的YARN的通用性意义 + yarn的job提交流程

    Mr程序写完之后,提交给yarn,yarn会产生一个MRAppMaster,想说的是,yarn变得很

    通用,yarn集群上,不光可以跑mr程序,还可以跑各种运算模型。

       海量批处理,mapreduce

       海量实时处理,spark

       海量流式处理,storm

    Mapreduce实现,MRAppMaster

    Spark实现,spark AppMaster

    Storm实现,storm AppMaster

    说明,有了hdfs和yarn,什么框架都畅通无阻,运行。

    以上是weekend110的YARN的通用性意义

    按F5或者open declaration,

     

    下面,来玩玩YarnClientProtocolProvider

     

     

     

     

     

     

    因为,上面的断点,只执行到这里,所以这边的也显示到这步。

    好的,以上是weekend110的yarn的job提交流程的源码跟踪分析。

    Soga,可谓,真的,写源码的人牛逼,我这跟踪源码学习过程,学会到程序的循序渐进,,,

  • 相关阅读:
    "rel=nofollow"属性简介
    js获取微信code
    css--clearfix浮动
    css3--之HSL颜色
    数据库列名为关键字如何搜索
    flexigrid
    easyui-dialog
    关于在jsp中的表达式
    jquery 中 $('div','li')
    myeclipse中常用的快捷键
  • 原文地址:https://www.cnblogs.com/zlslch/p/5895776.html
Copyright © 2011-2022 走看看