631
阿裏雲
表__基本概念_基本介紹_大數據計算服務-阿裏雲
表是 MaxCompute 的數據存儲單元。它在邏輯上也是由行和列組成的二維結構,每行代表一條記錄,每列表示相同數據類型的一個字段,一條記錄可以包含一個或多個列,各個列的名稱和類型構成這張表的 Schema。
MaxCompute的表格分兩種類型:外部表及內部表。
對於內部表,所有的數據都被存儲在MaxCompute中。表中的列可以是 MaxCompute 支持的任意種數據類型(Bigint,Double,String,Boolean,Datetime)。MaxCompute 中的各種不同類型計算任務的操作對象(輸入、輸出)都是表。用戶可以創建表,刪除表以及向表中導入數據。
對於外部表,MaxCompute並不真正持有數據,表格的數據可以存放在OSS中。MaxCompute僅會記錄表格的Meta信息。用戶可以通過MaxCompute的外部表機製處理OSS上的非結構化數據,例如:視頻、音頻、基因、氣象、地理信息等。處理流程包括:
- 將數據上傳至OSS;
- 在RAM產品中授予MaxCompute服務讀取OSS數據權限;
- 自定義Extractor:用於讀取OSS上的特殊格式數據。目前,MaxCompute默認提供CSV格式的Extractor,並提供視頻格式數據讀取的代碼樣例;
- 創建外部表;
- 執行SQL作業分析數據;
注意:
- 目前MaxCompute僅支持讀取外部表數據,即讀取OSS數據,不支持向外部表寫入數據;
- 更多文章介紹請參考雲棲社區文章之MaxCompute上如何處理非結構化數據;
最後更新:2016-10-26 14:17:46
上一篇:
項目空間__基本概念_基本介紹_大數據計算服務-阿裏雲
下一篇:
數據類型__基本概念_基本介紹_大數據計算服務-阿裏雲
DML語句__SQL_大數據計算服務-阿裏雲
創建OceanBase實例__快速入門_雲數據庫 OceanBase-阿裏雲
OpenIdConnectConfig__數據類型_API_API 網關-阿裏雲
創建存儲空間__快速入門_對象存儲 OSS-阿裏雲
發送短信接口__API使用手冊_短信服務-阿裏雲
刪除賬號__賬號管理_API 參考_雲數據庫 RDS 版-阿裏雲
業務限製__附錄_RAM API文檔_訪問控製-阿裏雲
管理鏡像共享__鏡像相關接口_API 參考_雲服務器 ECS-阿裏雲
CDN__操作事件(Event)樣例_用戶指南_操作審計-阿裏雲
通用圖像分析服務簡介__通用圖像分析服務_人工智能圖像類-阿裏雲
相關內容
常見錯誤說明__附錄_大數據計算服務-阿裏雲
發送短信接口__API使用手冊_短信服務-阿裏雲
接口文檔__Android_安全組件教程_移動安全-阿裏雲
運營商錯誤碼(聯通)__常見問題_短信服務-阿裏雲
設置短信模板__使用手冊_短信服務-阿裏雲
OSS 權限問題及排查__常見錯誤及排除_最佳實踐_對象存儲 OSS-阿裏雲
消息通知__操作指南_批量計算-阿裏雲
設備端快速接入(MQTT)__快速開始_阿裏雲物聯網套件-阿裏雲
查詢API調用流量數據__API管理相關接口_API_API 網關-阿裏雲
使用STS訪問__JavaScript-SDK_SDK 參考_對象存儲 OSS-阿裏雲