开放数据处理服务ODPS

操作手册下载
http://help.aliyun.com/view/11108327_13494938.html

快速操作手册

1，请登录 aliyun.com 官网 后在 “产 品服 务” 中选 择 “数据 处理 服务 ODPS”输入邀请码即可开通，更多的操作请在odpscmd中进行（类似mysql和oracle的客户端）
2，通过客户端管理使用 ODPS（请下载最新的客 户端），类似mysql的客户端程序， ODPS 客户端是一个 ODPS 程序,需要 JRE 环境才能运行,请下载并安装 JRE 1.6 以上版本。

下载ODPS的客户端

wget http://imgs-storage.cdn.aliyuncs.com/help/odps/odps-console.tar.gz

上传到某台本地服务器（支持linux和windows，建议最好使用linux服务器），并解压
2.1，tar zxvf odps-console.tar.gz
2.2，把Project名 称、相关云账号的accessId 和 accessKey的 值配置到clt的conf/odps_config.ini中， 如下：

project_name=xxxx
access_id=******
access_key=******
end_point=http://service.odps.aliyun.com/api  (注意：去掉"-inc”)

如何获得ID和key：
登陆www.aliyun.com  进入“我的阿里云”-->用户中心-->我的服务-->安全认证
或者登陆后直接访问：http://i.aliyun.com /access_key?spm=5176.7034181.0.0.vhx8wP

3，配置数据上传通道

plugins/tunnel/plugin.ini

command=com.aliyun.openservices.odps.console.tunnel.TunnelCommand

endpoint=http://dt.odps.aliyun.com（如果是阿里云的服务器，可以使用内网的endpoint=http://dt- ext.odps.aliyun-inc.com）
col.delimiter=44(分隔符的asc码，你可以使用其他的分隔符) 
row.delimiter=10 null.indicator=NULL
date.format=yyyyMMddHHmmss

说明:

endpoint=http://dt.odps.aliyun.com  ：指定tunnel的endpoint 
col.delimiter=44             : 指定列分隔符,默认为44 "," 
row.delimiter=10             : 指定列分隔符，默认为10 "\n" 
null.indicator=NULL          : 指定空字符串，默认为空串。如果指定空值，可以把 此行删除掉 
date.format=yyyyMMddHHmmss   : 指定日期的format格式，默认为yyyyMMddHHmmss  
bad.discard=false            ：指定脏数据是还丢弃，默认为false[目前只支持多列、少列是否忽略]

4，登陆ODPS

bin/odpscmd

执行help查看命令

5，上传和下载数据

上传： upload <tablename> [partition(spec)] from <filepath>;  如：upload pt_test partition(ds=nnnn,pt=2345) from data/pt1.txt;
下载：download <tablename> [partition(spec)] to <filepath>;

按照分区上传和下载数据

建表和partition 
create table tunnel_test (s string, i int, d datetime) partitioned by(ds string, pt string); 
alter table  tunnel_test add  partition(ds='d1',pt='p1'); 

编辑上传文件，如：

s1,11,20130910010101 
s2,22,20130911010101 
s3,33,20120911010101 

上传文件

upload tunnel_test partition (ds='d1',pt='p1') from data/upfile; 

下载文件

download tunnel_test partition (ds='d1',pt='p1') to data/downfile; 

也可使用SDK来上传数据。SDK的下载地址：

http://imgs-storage.cdn.aliyuncs.com/help/odps/odps_tunnel_ODPS_sdk.tar.gz

祝你好运！！