閱讀750 返回首頁    go windows


數據源配置__項目管理手冊_用戶操作指南_大數據開發套件-阿裏雲

數據源配置是數據集成的首要任務,在進行數據同步(數據導入或數據導出)任務開發時,項目管理員需配置可連通的數據源來支撐整個數據開發項目。

項目管理員可在當前項目空間下進行新建、編輯和刪除數據源。目前支持多種數據源類型,具體包括:ODPS、OCS、DRDS、ADS、RDS(MySQL、SQL Server、PostgreSQL)、OSS、Oracle、FTP。

新增數據源

【場景一】新建ODPS數據源

項目管理員創建ODPS數據源,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中項目管理,導航至數據源管理頁麵。

步驟3:點擊新增數據源。

步驟4:在新建數據源話彈出框中,選擇數據源類型為ODPS。

步驟5:配置ODPS數據源的各個信息項。

PM_1_2

針對ODPS數據源配置項的具體說明如下:

數據源名稱:由英文字母、數字、下劃線組成且需以字符或下劃線開頭,長度不超過30個字符。

數據源描述:對數據源的簡單描述,不超過1024個字符。

數據源類型:當前選擇的數據源類型。

ODPS Endpoint:默認隻讀。從係統配置中自動讀取。

ODPS項目名稱:對應的ODPS Project標識。

以登錄用戶身份連接:以當前用戶的身份連接ODPS Project。若選擇該選項,對應的AccessID和AccessKey選項將隱藏,無需配置。

以係統身份連接:以ODPS Project Owner身份連接該數據源。

  • AccessID:與ODPS Project Owner雲賬號對應的AccessID。
  • AccessKey:與ODPS Project Owner雲賬號對應的AccessKey,與AccessID成對使用。

步驟6:完成上述信息項的配置後,點擊測試連通性。

步驟7:測試連通性通過後,點擊確定。

【說明】每個項目空間係統都將生成一個默認的數據源(odps_first),對應的ODPS項目名稱為當前項目空間對應的計算引擎ODPS項目名稱。

【場景二】新建MySQL數據源

項目管理員創建MySQL數據源,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中項目管理,導航至數據源管理頁麵。

步驟3:點擊新增數據源。

步驟4:在新建數據源話彈出框中,選擇數據源類型為RDSMySQL。

步驟5:選擇以RDS實例形式或JDBC形式配置該MySQL數據源。

選擇以RDS實例形式配置該MySQL數據源:

1

上圖中的配置項具體說明如下:

數據源名稱:由英文字母、數字、下劃線組成且需以字符或下劃線開頭,長度不超過30個字符。

數據源描述:對數據源的簡單描述,不超過1024個字符。

數據源類型:當前選擇的數據源類型(RDS→MySQL→RDS實例形式)。

RDS實例ID:該MySQL數據源的實例ID。

RDS實例購買者ID:該MySQL數據源的實例購買者ID。

【備注】若選擇JDBC形式來配置數據源,其JDBC連接信息,格式為:jdbc:mysql://IP:Port/database。

數據庫名:該數據源對應的數據庫名。

用戶名/密碼:數據庫對應的用戶名和密碼。

步驟6:完成上述信息項的配置後,點擊測試連通性。

步驟7:測試連通性通過後,點擊確定。

【場景三】新建SQL Server數據源

項目管理員創建SQL Server數據源,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中的項目管理,點擊左側導航數據源管理

步驟3:點擊新增數據源。

步驟4:在新建數據源話彈出框中,選擇數據源類型為RDS→SQL Server。

步驟5:選擇以RDS實例形式或JDBC形式配置該SQL Server數據源。

選擇以RDS實例形式配置該SQL Server數據源:

上圖中的配置項具體說明如下:

數據源名稱:由英文字母、數字、下劃線組成且需以字符或下劃線開頭,長度不超過30個字符。

數據源描述:對數據源的簡單描述,不超過1024個字符。

數據源類型:當前選擇的數據源類型(RDS→SQL Server→RDS實例形式)。

RDS實例ID:該SQL Server數據源的RDS實例ID。

RDS實例購買者ID:該數據源對應的RDS實例購買者ID。

【備注】若選擇JDBC形式來配置數據源,其JDBC連接信息,格式為:jdbc:mysql://IP:Port/database。

數據庫名:該數據源對應的數據庫名。

用戶名/密碼:數據庫對應的用戶名和密碼。

步驟6:完成上述信息項的配置後,點擊測試連通性。

步驟7:測試連通性通過後,點擊確定。

【場景四】新建PostgreSQL數據源

項目管理員創建PostgreSQL數據源,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中的項目管理,點擊左側導航數據源管理

步驟3:點擊新增數據源。

步驟4:在新建數據源話彈出框中,選擇數據源類型為RDS→PostgreSQL。

步驟5:選擇以RDS實例形式或JDBC形式配置該PostgreSQL數據源。

選擇以RDS實例形式配置該PostgreSQL數據源:

上圖中的配置項具體說明如下:

數據源名稱:由英文字母、數字、下劃線組成且需以字符或下劃線開頭,長度不超過30個字符。

數據源描述:對數據源的簡單描述,不超過1024個字符。

數據源類型:當前選擇的數據源類型(RDS→PostgreSQL→RDS實例形式)。

RDS實例ID:該SQL Server數據源的RDS實例ID。

RDS實例購買者ID:該數據源對應的RDS實例購買者ID。

【備注】若選擇JDBC形式來配置數據源,其JDBC連接信息,格式為:jdbc:mysql://IP:Port/database。

數據庫名:該數據源對應的數據庫名。

用戶名/密碼:數據庫對應的用戶名和密碼。

步驟6:完成上述信息項的配置後,點擊測試連通性。

步驟7:測試連通性通過後,點擊確定。

【場景五】新建Oracle數據源

項目管理員創建Oracle數據源,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中的項目管理,點擊左側導航數據源管理

步驟3:點擊新增數據源。

步驟4:在新建數據源話彈出框中,選擇數據源類型為Oracle。

步驟5:配置Oralce數據源的各個信息項。

針對Oralce數據源配置項的具體說明如下:

數據源名稱:由英文字母、數字、下劃線組成且需以字符或下劃線開頭,長度不超過30個字符。

數據源描述:對數據源的簡單描述,不超過1024個字符。

數據源類型:當前選擇的數據源類型。

網絡類型:當前選擇的網絡類型。

JDBCUrl:JDBC連接信息,格式為:

jdbc:oracle:thin:@serverIP:Port:Database。

用戶名/密碼:對應的用戶名和密碼。

步驟6:完成上述信息項的配置後,點擊測試連通性。

步驟7:測試連通性通過後,點擊確定。

【場景六】新建ADS數據源

項目管理員創建ADS數據源,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中的項目管理,點擊左側導航數據源管理

步驟3:點擊新增數據源。

步驟4:在新建數據源話彈出框中,選擇數據源類型為ADS。

步驟5:配置ADS數據源的各個信息項。

PM_1_10

針對ADS數據源配置項的具體說明如下:

數據源名稱:由英文字母、數字、下劃線組成且需以字符或下劃線開頭,長度不超過30個字符。

數據源描述:對數據源的簡單描述,不超過1024個字符。

數據源類型:當前選擇的數據源類型。

連接Url:ADS連接信息,格式為:serverIP:Port。

Schema:相應的ADS Schema信息。

AccessID/AceessKey:對應的用戶名和密碼,即AK對。

步驟6:完成上述信息項的配置後,點擊測試連通性。

步驟7:測試連通性通過後,點擊確定。

【場景七】新建OSS數據源

項目管理員創建OSS數據源,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中的項目管理,點擊左側導航數據源管理

步驟3:點擊新增數據源。

步驟4:在新建數據源話彈出框中,選擇數據源類型為OSS。

步驟5:配置OSS數據源的各個信息項。

針對OSS數據源配置項的具體說明如下:

數據源名稱:由英文字母、數字、下劃線組成且需以字符或下劃線開頭,長度不超過30個字符。

數據源描述:對數據源的簡單描述,不超過1024個字符。

數據源類型:當前選擇的數據源類型。

網絡類型:當前選擇的網絡類型。

Endpoint:OSS Endpoint信息,格式為:https://oss.aliyuncs.com。

Bucket:相應的OSS Bucket信息。

AccessID/AceessKey:對應的用戶名和密碼,即AK對。

步驟6:完成上述信息項的配置後,點擊測試連通性。

步驟7:測試連通性通過後,點擊確定

【場景八】新建OCS數據源

項目管理員創建OCS數據源,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中的項目管理,點擊左側導航數據源管理

步驟3:點擊新增數據源。

步驟4:在新建數據源話彈出框中,選擇數據源類型為OCS。

步驟5:配置OCS數據源的各個信息項。

針對OCS數據源配置項的具體說明如下:

數據源名稱:由英文字母、數字、下劃線組成且需以字符或下劃線開頭,長度不超過30個字符。

數據源描述:對數據源的簡單描述,不超過1024個字符。

數據源類型:當前選擇的數據源類型。

網絡類型:當前選擇的網絡類型。

PROXY:相應的OCS Proxy。

Port:相應的OCS 端口。

用戶名/密碼:對應的用戶名和密碼。

步驟6:完成上述信息項的配置後,點擊測試連通性。

步驟7:測試連通性通過後,點擊確定。

【場景九】新建DRDS數據源

項目管理員創建DRDS數據源,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中的項目管理,點擊左側導航數據源管理

步驟3:點擊新增數據源。

步驟4:在新建數據源話彈出框中,選擇數據源類型為DRDS。

步驟5:配置DRDS數據源的各個信息項。

針對DRDS數據源配置項的具體說明如下:

數據源名稱:由英文字母、數字、下劃線組成且需以字符或下劃線開頭,長度不超過30個字符。

數據源描述:對數據源的簡單描述,不超過1024個字符。

數據源類型:當前選擇的數據源類型。

網絡類型:當前選擇的網絡類型。

JDBCUrl:JDBC連接信息,格式為:jdbc://mysql://serverIP:Port/database。

用戶名/密碼:對應的用戶名和密碼。

步驟6:完成上述信息項的配置後,點擊測試連通性。

步驟7:測試連通性通過後,點擊確定。

【場景十】新建FTP數據源

項目管理員創建FTP數據源,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中的項目管理,點擊左側導航數據源管理

步驟3:點擊新增數據源。

步驟4:在新建數據源話彈出框中,選擇數據源類型為FTP。

步驟5:配置FTP數據源的各個信息項。

針對FTP數據源配置項的具體說明如下:

數據源名稱:由英文字母、數字、下劃線組成且需以字符或下劃線開頭,長度不超過30個字符。

數據源描述:對數據源的簡單描述,不超過1024個字符。

數據源類型:當前選擇的數據源類型。

網絡類型:當前選擇的網絡類型。

Portocol:目前僅支持FTP和SFTP協議。

Host:對應FTP主機的IP地址。

Port:若選擇的是FTP協議則端口默認為21,若選擇的是SFTP協議則端口默認為22。

用戶名/密碼:訪問該FTP服務的賬號密碼。

編輯數據源

項目管理員需要更改已有數據源的配置信息,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中的項目管理,點擊左側導航數據源管理

步驟3:在數據源列表搜索框中輸入數據源名稱模煳匹配查找需要編輯的數據源。

步驟4:點擊操作欄中的編輯。

步驟5:配置數據源的信息項(具體參見“章節5.1.2.2 新增數據源”)。

步驟6:完成信息項的編輯後,點擊測試連通性。

步驟7:測試連通性通過後,點擊確定。

刪除數據源

項目管理員需要刪除已有數據源配置,具體步驟如下:

步驟1:以開發者身份進入阿裏雲數加平台>大數據開發套件>管理控製台,點擊對應項目操作欄中的進入工作區

步驟2:點擊頂部菜單欄中的項目管理,點擊左側導航數據源管理

步驟3:在數據源列表搜索框中輸入數據源名稱模煳匹配查找需要刪除的數據源。

步驟4:點擊操作欄中的刪除。

【注意】項目管理員在編輯、刪除已有數據源配置時需謹慎操作,以免影響引用該數據源配置的工作流、代碼等正常執行,而造成生產故障。

最後更新:2016-12-19 19:37:51

  上一篇:go 管理配置__數據管理手冊_用戶操作指南_大數據開發套件-阿裏雲
  下一篇:go 項目管理__手冊_用戶操作指南_大數據開發套件-阿裏雲