zoukankan      html  css  js  c++  java
  • 1.3 ODPS

    来源(完全照搬.仅做记录):http://blog.itpub.net/26613085/viewspace-1327313/

    注册odps账号
    注册地址:http://www.aliyun.com/product/odps/
    还赠送一个同名的支付宝账号。

    开通“开放数据处理服务 ODPS”服务
    开通时需要先实名认证,选择“登录支付宝快速认证”完成认证过程。认证后可以开通odps服务,默认是“按量付费”。
    开通后,需要先创建“ACCESS_KEY”,会生成一个ACCESS KEY ID和ACCESS KEY SECRET。创建后就可以登陆odps控制台了。

     创建项目

    下载和配置odps客户端
    下载地址(windows平台):http://www.aliyun.com/product/odps/
    最下面“开发者资源”-》“odps客户端工具”
    需要安装1.6以上版本的jdk。
    解压后,有个odps-cli-javaodpsinodps.bat,这个就是客户端执行文件了。
    配置odps-cli-javaodpsconfodps.conf,原文是这样的
    end_point=http://service.odps.aliyun.com/api
    project_name=
    access_id=
    access_key=
    配置项目名称、access_id、和access_key。
    配置完后点击odps-cli-javaodpsinodps.bat居然一闪而过,这是什么原因?
    使用命令行执行这个文件可以见到报错信息了:
    ERROR: Load configuration failed: create account error,please check file odps.conf and the command arguments
    这里显示是配置文件搞错了,但是检查了下,没有问题,后来把project_name先去掉,然后又搞了下java的环境变量,就好了,不知道是网络问题还是配置问题。

     

    配置上project_name之后,会默认进入这个项目,如果没有在odps.conf配置项目名称,也可以use <project_name>来进入项目。
    建张表试试
    odps:yangsw_test> sql
    odps:sql:yangsw_test> create table if not exists dual(id bigint);
    InstanceId: 20141110065924193g1brc1z5
    OK

    odps:sql:yangsw_test> select * from dual;
    InstanceId: 20141110070024424g4h5pdx5
    SQL: .
    +------------+
    | id         |
    +------------+
    +------------+
    在web控制台查看下这张表

     

    好吧,就这样,阿里云大数据时代开启了。
    不过要记得,在odps练习操作的时候,一定要用少一些数据量,odps是按照数据量和sql或者MapReduce的复杂度进行收费的。

  • 相关阅读:
    私有IP地址
    Python随手记
    Selenium+Python环境搭建
    FTP- Download, upload, Delete & find files
    初学Selenium遇上的问题
    automate sap遇上的一些问题
    LR常见问题
    服务器资源监控指标
    QTP场景恢复函数
    导出excel用例
  • 原文地址:https://www.cnblogs.com/ericazy/p/6136350.html
Copyright © 2011-2022 走看看