zoukankan      html  css  js  c++  java
  • 【Spark篇】---SparkStreaming中算子中OutPutOperator类算子

    一、前述

    SparkStreaming中的算子分为两类,一类是Transformation类算子,一类是OutPutOperator类算子。

    Transformation类算子updateStateByKey,reduceByKeyAndWindow,transform

    OutPutOperator类算子print,foreachRDD,saveAsTextFile

    本文讲解OutPutOperator类算子。

    二、具体

         1、foreachRDD

          可以拿到DStream中的一个个的RDD,对拿到的RDD可以使用Transformation类算子对数据进行转换,foreachRDD方法内,拿到的RDD Transformation类算子外的代码是在Driver端执行

  • 相关阅读:
    VMware12中CentOS7网络设置
    技术牛人
    PHP程序员如何突破成长瓶颈(php开发三到四年)
    php多线程
    go git 安装配置与使用 (windows 7 64bit)
    php内核和瓦力上线部署
    VM虚拟机下安装Centos7.0图文教程
    php结合redis实现高并发下的抢购、秒杀功能
    php foreach循环中unset后续的键值问题
    excle导入
  • 原文地址:https://www.cnblogs.com/LHWorldBlog/p/8521574.html
Copyright © 2011-2022 走看看