zoukankan      html  css  js  c++  java
  • 在spark2中的shell使用python3

    在spark2中的shell使用python3

    spark2.0.0中的python默认使用python2,可以通过以下两种方式之一使用python3:

    • PYSPARK_PYTHON=python3 ./bin/pyspark
    • 修改~/.profile,增加 PYSPARK_PYTHON=python3

    参考:http://stackoverflow.com/questions/30279783/apache-spark-how-to-use-pyspark-with-python-3

    Author: galaxy

    Created: 2016-08-14 Sun 11:50

    Emacs 24.5.6 (Org mode 8.2.10)

    Validate

  • 相关阅读:
    Maven核心简析
    块/文件/对象存储对比性概述
    Java SE-基本数据类型对应包装类
    Maven+eclipse快速入门
    IaaS、PaaS、SaaS、CaaS、MaaS五者的区别
    Collections.shuffle()源码分析
    java集合继承关系图
    ArrayList和LinkedList的区别
    ArrayList的实现原理
    session以及分布式服务器session共享
  • 原文地址:https://www.cnblogs.com/galaxy-gao/p/5769889.html
Copyright © 2011-2022 走看看