zoukankan      html  css  js  c++  java
  • 【Spark篇】---SparkStreaming中算子中OutPutOperator类算子

    一、前述

    SparkStreaming中的算子分为两类,一类是Transformation类算子,一类是OutPutOperator类算子。

    Transformation类算子updateStateByKey,reduceByKeyAndWindow,transform

    OutPutOperator类算子print,foreachRDD,saveAsTextFile

    本文讲解OutPutOperator类算子。

    二、具体

         1、foreachRDD

          可以拿到DStream中的一个个的RDD,对拿到的RDD可以使用Transformation类算子对数据进行转换,foreachRDD方法内,拿到的RDD Transformation类算子外的代码是在Driver端执行

  • 相关阅读:
    TeamWork#3,Week5,Introduction to the "take-away" Sale Selection Project
    TeamWork#3,Week5,The First Meeting of Our Team
    TeamWork#2,Week 5,Our Measurement of Contribution to the Team
    TeamWork#1,Week 5,Suggestions for Team Project
    TeamWork#2,Week 2,We are sixsix!
    TeamWork#1,Week 2,Learn In Team
    必应词典手机版(IOS版)与有道词典(IOS版)之软件分析【功能篇】【用户体验篇】
    Daily Scrum1 11.3
    团队项目之分工
    团队项目之开题scrum meeting
  • 原文地址:https://www.cnblogs.com/LHWorldBlog/p/8521574.html
Copyright © 2011-2022 走看看