zoukankan      html  css  js  c++  java
  • Spark 编程模型(上)

                                                                     Spark的编程模型

    核心概念(注意对比MR里的概念来学习)

    Spark Application的组成 

    Spark Application基本概念

     

    Spark Application编程模型

    回顾scala版本的 wordcount程序

                                                                                                                                                                               

    初识RDD

    什么是RDD

     RDD接口

     

    RDD的本质特征

    RDD -- partitions

    RDD-preferredLocations

    RDD-dependencies

    RDD-compute

     

    RDD-partitioner

    RDD-lineage

     典型RDD的特征

    不同角度看RDD

    Scheduler Optimizations

  • 相关阅读:
    鼠标和滚轮事件
    UI事件
    跨浏览器的事件对象
    DOM中的事件对象和IE事件对象
    Monolog手册参考
    nginx 配置
    es elasticsearch-head安装
    es ik分词插件安装
    yii2.0+es
    php分词工具scws
  • 原文地址:https://www.cnblogs.com/braveym/p/7347316.html
Copyright © 2011-2022 走看看