661      人物

其他操作__常用命令_基本介绍_大数据计算服务-阿里云

Alias功能主要为了满足在不修改代码的前提下，在 MapReduce 或 自定义函数(UDF) 代码中，通过某个固定的资源名读取不同资源(数据)的需求。命令格式：

ALIAS <alias>=<real>;

用途：为资源创建别名。

示例：

ADD TABLE src_part PARTITION (ds='20121208') AS res_20121208;
ADD TABLE src_part PARTITION (ds='20121209') AS res_20121209;
ALIAS resName=res_20121208;
jar -resources resName -libjars work.jar  -classpath ./work.jar com.company.MainClass args ...;  // 作业一
ALIAS resName=res_20121209;
jar -resources resName -libjars work.jar  -classpath ./work.jar com.company.MainClass args ...; // 作业二

上面的资源别名“resName” 在两个作业里引用到不同的资源表，代码可以不做修改也能读取到不同的数据。

Set

命令格式：

set ["<KEY>=<VALUE>"]

说明：用户可以使用set命令设置MaxCompute 或用户自定义的系统变量影响MaxCompute 的行为。

目前，MaxCompute 支持的系统变量包括：

--MaxCompute  SQL及新版本Mapreduce支持的Set命令
set odps.stage.mapper.mem=    --设置每个map worker的内存大小，单位是M，默认值1024M
set odps.stage.reducer.mem=   --设置每个reduce worker的内存大小，单位是M，默认值1024M
set odps.stage.joiner.mem=    --设置每个join worker的内存大小，单位是M，默认值1024M
set odps.stage.mem =
    --设置MaxCompute 指定任务下所有worker的内存大小。优先级低于以上三个set key，单位M，无默认值
set odps.stage.mapper.split.size=
    -- 修改每个map worker的输入数据量，即输入文件的分片大小，
    -- 从而间接控制每个map阶段下worker的数量，单位M，默认值256M
set odps.stage.reducer.num=    --修改每个reduce阶段worker数量，无默认值。
set odps.stage.joiner.num=    --修改每个join阶段worker数量，无默认值。
set odps.stage.num=           --修改MaxCompute 指定任务的所有阶段的worker的并发度，优先级低于以上三者，无默认值。

Show Flags

显示Set设置的参数，命令格式：

show flags;

setproject ["<KEY>=<VALUE>"];

cost sql <SQL Sentence>;

odps@ $odps_project >cost sql select distinct project_name, user_name from meta.m_security_users distribute by project_name sort by project_name;  
ID = 20150715113033121gmsbjxl1
Input:65727592 Bytes
UDF:0
Complexity:1.0