zoukankan      html  css  js  c++  java
  • spark 33G表

    http://192.168.2.51:4041

    http://hadoop1:8088/proxy/application_1512362707596_0006/executors/

    Executors

    from pyspark.sql import SparkSession

    my_spark = SparkSession
    .builder
    .appName("myAppYarn-10g")
    .master('yarn')
    .config("spark.mongodb.input.uri", "mongodb://pyspark_admin:admin123@192.168.2.50/recommendation.article")
    .config("spark.mongodb.output.uri", "mongodb://pyspark_admin:admin123@192.168.2.50/recommendation.article")
    .getOrCreate()

    db_rows = my_spark.read.format("com.mongodb.spark.sql.DefaultSource").load().collect()


    Summary

    Executors

  • 相关阅读:
    OpenJudge 2753 菲波那契数列
    Jmeter的介绍、安装及汉化
    spring集成Java性能监控调优工具-Javamelody
    js-xlsx + handsontable + echarts实现excel上传编辑然后显示成图表
    spring mybatis设置SQL语句打印
    Ribbon负载均衡策略详解
    JVM内存结构、Java内存模型以及Java对象模型之间的区别
    Java的自动拆装箱
    elasticsearch集群管理指南
    ElasticSearch最全分词器比较及使用方法
  • 原文地址:https://www.cnblogs.com/rsapaper/p/7976610.html
Copyright © 2011-2022 走看看