zoukankan      html  css  js  c++  java
  • 【Spark篇】---SparkStreaming中算子中OutPutOperator类算子

    一、前述

    SparkStreaming中的算子分为两类,一类是Transformation类算子,一类是OutPutOperator类算子。

    Transformation类算子updateStateByKey,reduceByKeyAndWindow,transform

    OutPutOperator类算子print,foreachRDD,saveAsTextFile

    本文讲解OutPutOperator类算子。

    二、具体

         1、foreachRDD

          可以拿到DStream中的一个个的RDD,对拿到的RDD可以使用Transformation类算子对数据进行转换,foreachRDD方法内,拿到的RDD Transformation类算子外的代码是在Driver端执行

  • 相关阅读:
    反射模块与模块之间的通信
    WCF传输协议
    IIs7 报错
    MVC3 ActionResult 返回类型
    三条数据 判断其中最大与最小
    dos批处理命令详解
    十拿九稳过倒桩之(倒桩技巧)
    九项路考(1)铁饼神功
    山鸽子
    九项路考(2)
  • 原文地址:https://www.cnblogs.com/LHWorldBlog/p/8521574.html
Copyright © 2011-2022 走看看