661      財經資訊

其他操作__常用命令_基本介紹_大數據計算服務-阿裏雲

Alias功能主要為了滿足在不修改代碼的前提下，在 MapReduce 或 自定義函數(UDF) 代碼中，通過某個固定的資源名讀取不同資源(數據)的需求。命令格式：

ALIAS <alias>=<real>;

用途：為資源創建別名。

示例：

ADD TABLE src_part PARTITION (ds='20121208') AS res_20121208;
ADD TABLE src_part PARTITION (ds='20121209') AS res_20121209;
ALIAS resName=res_20121208;
jar -resources resName -libjars work.jar  -classpath ./work.jar com.company.MainClass args ...;  // 作業一
ALIAS resName=res_20121209;
jar -resources resName -libjars work.jar  -classpath ./work.jar com.company.MainClass args ...; // 作業二

上麵的資源別名“resName” 在兩個作業裏引用到不同的資源表，代碼可以不做修改也能讀取到不同的數據。

Set

命令格式：

set ["<KEY>=<VALUE>"]

說明：用戶可以使用set命令設置MaxCompute 或用戶自定義的係統變量影響MaxCompute 的行為。

目前，MaxCompute 支持的係統變量包括：

--MaxCompute  SQL及新版本Mapreduce支持的Set命令
set odps.stage.mapper.mem=    --設置每個map worker的內存大小，單位是M，默認值1024M
set odps.stage.reducer.mem=   --設置每個reduce worker的內存大小，單位是M，默認值1024M
set odps.stage.joiner.mem=    --設置每個join worker的內存大小，單位是M，默認值1024M
set odps.stage.mem =
    --設置MaxCompute 指定任務下所有worker的內存大小。優先級低於以上三個set key，單位M，無默認值
set odps.stage.mapper.split.size=
    -- 修改每個map worker的輸入數據量，即輸入文件的分片大小，
    -- 從而間接控製每個map階段下worker的數量，單位M，默認值256M
set odps.stage.reducer.num=    --修改每個reduce階段worker數量，無默認值。
set odps.stage.joiner.num=    --修改每個join階段worker數量，無默認值。
set odps.stage.num=           --修改MaxCompute 指定任務的所有階段的worker的並發度，優先級低於以上三者，無默認值。

Show Flags

顯示Set設置的參數，命令格式：

show flags;

setproject ["<KEY>=<VALUE>"];

cost sql <SQL Sentence>;

odps@ $odps_project >cost sql select distinct project_name, user_name from meta.m_security_users distribute by project_name sort by project_name;  
ID = 20150715113033121gmsbjxl1
Input:65727592 Bytes
UDF:0
Complexity:1.0