483
技術社區[雲棲]
MaxCompute百問集錦（持續更新）
大數據計算服務（MaxCompute，原名 ODPS，https://www.aliyun.com/product/odps）是一種快速、完全托管的 GB/TB/PB 級數據倉庫解決方案。MaxCompute 向用戶提供了完善的數據導入方案以及多種經典的分布式計算模型，能夠更快速的解決用戶海量數據計算問題，有效降低企業成本，並保障數據安全。同時，大數據開發套件和MaxCompute關係緊密，大數據開發套件為 MaxCompute 提供了一站式的數據同步，任務開發，數據工作流開發，數據管理和數據運維等功能，可以參見大數據開發套件簡介來對其進行深入了解。本文為大家整理了關於MaxCompute的係列問題供大家查閱參考。
產品谘詢
MaxCompute是什麼，怎麼用？
https://yq.aliyun.com/ask/52394
MaxCompute（原odps）是否支持快照，changelog的設置方式是什麼，如果有文檔請發一下。
https://yq.aliyun.com/ask/53651
為什麼開發MaxCompute？和類似的開源項目有啥異同？
https://yq.aliyun.com/ask/41916
maxcompute聽起來很強大，會不會有lock-in問題？
https://yq.aliyun.com/ask/39752
StreamCompute和MaxCompute中的datahub區別？
https://yq.aliyun.com/ask/54575
常用場景有哪些？如何才能接入maxcompute的能力？
https://yq.aliyun.com/ask/39753
開通/注銷問題
如何注銷MaxCompute(ODPS)服務？
https://yq.aliyun.com/ask/16464
收費問題
我最近都沒有進行maxcompute的計算, 為啥最近的4個月都有扣費操作的?
https://yq.aliyun.com/ask/54068
現在的數加平台，大數據MaxCompute（原ODPS）怎麼不能查看每條sql執行的費用，我需要提前知道每個sql的費用？
https://yq.aliyun.com/ask/53661
到MaxCompute即將到期的短信，續費入口在哪裏？
https://yq.aliyun.com/ask/54330
大數據計算服務MaxCompute（原ODPS）的扣費是因為項目未刪除嗎？ 想將賬號內大數據的幾個項目全部刪除，刪除失敗，能否幫忙刪一下。
https://yq.aliyun.com/ask/54294
新創建的項目：rec_data 付款後一直沒有生成，什麼問題。
https://yq.aliyun.com/ask/54183
開通MaxCompute 包月付費後，執行SQL是否還會產生費用 ？
https://yq.aliyun.com/ask/15165
MaxCompute2.0使用問題
如何開通MaxCompute 2.0？
https://yq.aliyun.com/ask/40953
MaxCompute2.0 Outputer和Extractor有什麼關係，是幹什麼的，誰能說清楚？
https://yq.aliyun.com/ask/53655
請問一下，maxcompute2.0裏麵使用表格存儲作為外部表，對這個外表做聯合查詢的時候是不是會必然掃OTS的全部記錄?
https://yq.aliyun.com/ask/53291
數據同步問題
請問華南的ecs和華東的MaxCompute內網互通嗎？
https://yq.aliyun.com/ask/54282
你好，目前我們往maxcompute上傳的數據都是結構的表數據，是我們在本地服務器對用戶的行為日誌分析後提取到的所需信息，在將這些結構化的數據上傳到maxcompute。
https://yq.aliyun.com/ask/53308
MaxCompute篩檢重複數據,將新數據存儲到mysql數據庫中
https://yq.aliyun.com/ask/53344
我們的MYSQL數據庫在ECS服務器上，不是RDS，ECS上使用了安全組，隻允許內網訪問以及特定的IP的訪問。 現在要通過MaxCompute中建立數據源，連接上MYSQL，但是 通過不了連接測試。 請問該在mysql的ECS安全組上進行怎樣的設置？ 比如設置那些內網IP ？
https://yq.aliyun.com/ask/54339
數據服務器rds在華北2地區，但是maxcompute 現在在華東2區，不能實現我們的需求功能，但是需要海量數據的快速讀取，有沒有其他方案能夠解決？謝謝！
https://yq.aliyun.com/ask/53606
今天淩晨開始，從華北2的隻讀RDS到MaxCompute的隻讀業務一直同步無法完成，進度到90％幾之後就沒有速度，所有調度都是這樣，偶爾有能成功的，不知道是什麼問題，麻煩看一下。附件為同步日誌。
https://yq.aliyun.com/ask/54326
MaxCompute （原ODPS）tunnel上傳數據報格式化錯誤。
https://yq.aliyun.com/ask/53662
如果申請MaxCompute 和ADS，發現這兩個產品不在一個Region裏，一個在華東2，一個在華東如果數據傳輸maxcomputer->ads是否要開通高速通道？ 怎麼做？
https://yq.aliyun.com/ask/53664
你好，我們本地服務器每天采集的網站日誌有10+G，然後上傳至maxcompute，上傳速度特別慢，請問有沒有好的解決方法？謝謝！是tunnel upload，200k/s左右
https://yq.aliyun.com/ask/53310
如何在shell腳本中 將一個txt文件中的數據上傳到 MaxCompute的某張表中， 把這兩條命令組合成一條的辦法吧 /odpscmd/bin/odpscmd tunnel upload "$FILE" project.table
https://yq.aliyun.com/ask/53289
數據怎麼導入maxCompute中
https://yq.aliyun.com/ask/39743
maxcompute 數據導出到本地Mysql
https://yq.aliyun.com/ask/38060
ODPS拋出異常，線上數據沒有更新，異常信息如下：
https://yq.aliyun.com/ask/54382
在本地利用ODPS客戶端，無法查詢MAXCOMPUTE上的任何一張表，提示如下： Warning: ODPS request failed:Connection reset, retryCount:2, will retry in 130 seconds.
https://yq.aliyun.com/ask/53297
數據管理問題
MaxCompute這裏的生命周期是什麼用，就是數據隻能最多保存365天，然後就會清空？ 如果是，這個時間能無限嗎？
https://yq.aliyun.com/ask/54186
MaxCompute （原odps）項目默認的分區最大值設置為60000，請問怎麼更改這個默認值呢？
https://yq.aliyun.com/ask/53663
數據下載問題
在MaxCompute（原 ODPS）裏運行sql命令，怎麼能下載超過一萬行的數據？
https://yq.aliyun.com/ask/53637
數據開發-SQL問題
maxCompute 批量Insert問題
https://yq.aliyun.com/ask/53916
請問MaxCompute表的decimal怎麼設置成保留2位小數，類似於decimal(16,2)方式。 比如0.04入庫後成了0.040000000000000001
https://yq.aliyun.com/ask/53641
odps支持 正則匹配中文嗎？
https://yq.aliyun.com/ask/54194
關於 odps.stage.* 和odps.sql.* 的設置，最好是全麵的一些的，我們學習下，感謝！
https://yq.aliyun.com/ask/53315
MaxCompute SQL中的Select語句最多隻能返回10000條結果麼？
https://yq.aliyun.com/ask/16456
odps sql 子查詢再聯表查詢時，報錯！
https://yq.aliyun.com/ask/42700
在編寫odps sql 如何獲取當前時間
https://yq.aliyun.com/ask/40893
ODPS如何可以分析內容為JSON格式的字段？
https://yq.aliyun.com/ask/39157
MapReduce問題
你好，目前業務上有一些字典文件需要在mapper或者reducer階段查詢，但是文件大小比較大，大概幾百兆甚至幾個G的樣子，MaxCompute有分布式緩存的方案嗎？？ 查詢的response time一般需要多少時間？ 如果大於2G的話，可以用阿裏雲的redis之類的嗎？ 網絡通嗎？
https://yq.aliyun.com/ask/53285
UDF問題
在maxCompute的大數據開發套件的服務中，UDF 能不能支持python寫的腳本？
https://yq.aliyun.com/ask/53652
ip地址在maxcompute中可以解析成實際定位的使用地址嗎（城市、省份）？ 或者在阿裏雲別的服務中有這項功能嗎？ 例如獲取的ip地址為125.79.232.213，可以輸出定位的地址為福建南平。
https://yq.aliyun.com/ask/54292
odps裏麵，我寫了一個udf，java代碼中的udf已經按照阿裏雲例子寫的（繼承了UDF），但是在odps sql裏麵調用的時候報錯
https://yq.aliyun.com/ask/54387
MaxCompute 做數據分析，自己編算法在哪裏實現
https://yq.aliyun.com/ask/37639
odps之udf說明中，隻支持udf和udtf兩種形式，不知道可否支持udaf？
https://yq.aliyun.com/ask/51883
SDK問題
我看MaxCompute 的產品介紹上麵提到了有restful 的接口， 以及jdbc連接方式，但是沒有看到相關的文檔，請問是否可以幫忙提供一下文檔？
https://yq.aliyun.com/ask/53640
請問MaxCompute Java SDK中沒有對數據批量上傳的接口嗎？
https://yq.aliyun.com/ask/53142
MaxCompute SDK中insert偶爾報錯，請問什麼原因 com.aliyun.odps.OdpsException: ODPS-0110999: Critical! Internal error happened in commit operation and rollback failed, possible breach of atomicity - Rename directory failed during DDLTask
https://yq.aliyun.com/ask/53647
使用MaxCOmpute python SDK讀取ODPS上一張表，做一些處理後，寫入另外一張表，讀取和寫入都是多線程的。遇到問題1. 多線程處理時，每個線程每次循環（每次循環處理100條數據）均新建了一個odps連接，有沒有可能是odps連接太多了？文檔中沒有發現如何關閉這個odps連接？ 2. 在ODPS客戶端，操作一些sql命令時，也是有超時的，客戶端也有超時的話，是不是可以先排除程序的問題？如下： Aliyun ODPS Command Line Tool Version 0.21.1 @Copy
https://yq.aliyun.com/ask/53658
大數據計算服務 > SDK > Java SDK谘詢
https://yq.aliyun.com/ask/49818
權限問題
請問如何管理之前在MaxCompute中添加的雲賬號權限？
https://yq.aliyun.com/ask/53143
運維部署問題
MaxCompute有成型的災備解決方案麼？
https://yq.aliyun.com/ask/53032
本身MaxCompute是為了幾千/幾萬台機器規模開發的大規模分布式係統，最小化部署大概什麼規模呢？
https://yq.aliyun.com/ask/39755
MaxCompute有成型的災備解決方案麼？
https://yq.aliyun.com/ask/53138
請問max compute，我們要在雲監控裏麵設置監控項嗎，還是這個不用什麼監控問題，謝謝！
https://yq.aliyun.com/ask/54217
開發工具-Stuido問題
MaxCompute Studio插件無法提交sql腳本
https://yq.aliyun.com/ask/52001
我用了Itellij 的 maxCompute studio插件，現在我寫了一個MR 程序，想在本地測一下，類似於eclipse ODPS插件那樣，從雲上的表裏下載一些資源到本地的warehouse 做測試，但是我點開 studio的文檔，mapreduce 的文檔頁麵已經沒有內容了，請問這種本地測試隻能在 maxcompute java module中進行是嗎，我建立的普通的module 或者 maven 裏的module 裏的MR程序是無法本地測試的是嗎？？？
https://yq.aliyun.com/ask/54187
有獎活動：
最後更新：2017-06-30 21:50:57