zoukankan      html  css  js  c++  java
  • 【Spark篇】---SparkStreaming中算子中OutPutOperator类算子

    一、前述

    SparkStreaming中的算子分为两类,一类是Transformation类算子,一类是OutPutOperator类算子。

    Transformation类算子updateStateByKey,reduceByKeyAndWindow,transform

    OutPutOperator类算子print,foreachRDD,saveAsTextFile

    本文讲解OutPutOperator类算子。

    二、具体

         1、foreachRDD

          可以拿到DStream中的一个个的RDD,对拿到的RDD可以使用Transformation类算子对数据进行转换,foreachRDD方法内,拿到的RDD Transformation类算子外的代码是在Driver端执行

  • 相关阅读:
    电商数据分析模型
    电商系统中的商品模型的分析与设计
    java枚举使用详解
    运用四色建模法进行领域分析
    UML,Powerdesigner 使用方法
    powerdsigner Association Multiplicity
    UML的类图、时序图表示方法以及惯例
    面向对象分析与设计—四色原型模式(彩色建模、领域无关模型)(概念版)
    知识读书笔记
    知识型读书笔记
  • 原文地址:https://www.cnblogs.com/LHWorldBlog/p/8521574.html
Copyright © 2011-2022 走看看