zoukankan      html  css  js  c++  java
  • Spark 学习之 spark-sql.sh的简单使用

      启动hadoop,启动Spark。

      造一份简单的测试数据customers.txt,为了方便,我把它放在了spark/bin目录:

    100, John Smith, Austin, TX, 78727
    200, Joe Johnson, Dallas, TX, 75201
    300, Bob Jones, Houston, TX, 77028
    400, Andy Davis, San Antonio, TX, 78227
    500, James Williams, Austin, TX, 78727
    

      启动Spark-SQL:

    ./spark-sql.sh
    

      

      将数据映射成数据库表:

    create table Customer(
    id string,
    name string,
    city string,
    company string,
    num string
    )
    ROW FORMAT DELIMITED FIELDS TERMINATED BY ','; 
    

      加载数据:

    load data local inpath './customers.txt' overwrite into table Customer;
    

      查询数据:

    select * from Customer;
    

      

      完!

  • 相关阅读:
    函数及其表示
    集合等离散数学内容
    求和
    分式·新方法
    弹力、重力、摩擦力
    洛谷 P1357 花园
    浮力
    因式分解·新方法
    压强
    洛谷 P2051 [AHOI2009]中国象棋
  • 原文地址:https://www.cnblogs.com/lsnl8480/p/4734836.html
Copyright © 2011-2022 走看看