zoukankan      html  css  js  c++  java
  • 12_Azkaban案例实践5_Command操作Hive脚本任务

    HIVE脚本任务

      hadoop fs -mkdir -p /aztest/hiveinput

      hadoop fs -put az.data /aztest/hiveinput/

      l 创建job描述文件和hive脚本

        Hive脚本: test.sql

    use default;
    drop table aztest;
    create table aztest(id int,name string) row format delimited fields terminated by ',';
    load data inpath '/aztest/hiveinput' into table aztest;
    create table azres as select * from aztest;
    insert overwrite directory '/aztest/hiveoutput' select count(1) from aztest; 

        Job描述文件:hivef.job  

    #hivef.job
    type=command
    command=/usr/local/src/hive-1.2.1/bin/hive -f 'test.sql'

      2、将所有job资源文件打到一个zip包中

      

      3、在azkaban的web管理界面创建工程并上传zip包

      4、启动job

      

      

  • 相关阅读:
    vue的class绑定
    less里面calc() 语法
    问题
    Spring Boot面试题
    Redis面试题
    nginx面试题
    rabbitMQ面试题
    Linux+Git命令
    docker
    JAVA常用单词
  • 原文地址:https://www.cnblogs.com/yaboya/p/9319117.html
Copyright © 2011-2022 走看看