在MaxCompute的Quota管理列表可以查看Data Transmission ServiceQuota,並通過Quota配置來設定Data Transmission ServiceQuota的並發數。
背景資訊
獨享Data Transmission Service(訂用帳戶)資源群組是MaxCompute為滿足部分客戶資料轉送的需求推出的獨享資源群組,保障資料轉送資源的獨享性,並提高資料轉送的穩定性。
更多資訊可以參見購買與使用獨享Data Transmission Service資源群組和資料轉送獨享資源費用(訂用帳戶)。
地區限制
目前支援地區如下:
地區名稱 | 地區ID |
華南1(深圳) | cn-shenzhen |
華東2(上海) | cn-shanghai |
華北2(北京) | cn-beijing |
華東1(杭州) | cn-hangzhou |
中國香港 | cn-hongkong |
新加坡 | ap-southeast-1 |
印尼(雅加達) | ap-southeast-5 |
美國(維吉尼亞) | us-east-1 |
配置Quota
已經購買的Data Transmission ServiceQuota可以進行二次拆分,預設阿里雲帳號具有Quota配置許可權,RAM帳號可以通過授權獲得配置許可權,詳情請參見RAM許可權。配置Quota主要由基礎配置和伸縮配置兩部分組成。
基礎配置
Quota基礎配置即對Data Transmission Service類型二級Quota做如下配置:
每個一級Quota下最多支援20個二級Quota,請根據業務情境合理規劃和配置。
新增、刪除付费方式
預留並發數:若沒有分時伸縮情境需求,通過此配置二級Quota的預留並發數即可滿足Quota的日常管理需求。
彈性預留並發數配置(僅作用於當前生效的配置方案)。配置彈性預留並發數會產生額外費用,若沒有分時伸縮情境需求,請不要配置彈性預留並發數。
伸縮配置
Quota伸縮配置即分時伸縮配置,實現為Quota在不同時段設定不同的預留並發數和彈性預留並發數。
配置流程
登入MaxCompute控制台,在左上方選擇地區。
在左側導覽列,選擇 。
在Quota管理頁面,單擊目標Quota對應操作列的Quota配置。
僅支援付费方式為包年包月的Quota。
Quota基礎配置
在Quota配置頁面,選擇基础配置頁簽,單擊编辑基础配置。
單擊新增二级Quota或為現有的二級Quota配置预留并发数和弹性预留并发数。
參數說明如下:
參數
說明
Quota名称
自訂輸入,需以字母開頭,包含字母、數字和底線。
在SDK或Connector中指定某個二級Quota時,QuotaName需要填寫控制台Quota管理列表中系統產生的名稱,格式為
“ot_42854300324****_169821756****_p#ot_42854300324****_169821756****”。
预留并发数
包月預留並發數。
一級Quota的預留並發數即為預付費購買的總並發數。需要增加、減少並發數只能通過升配、降配方式實現,在此不可編輯。
二級Quota的預留並發數規定如下:
所有二級Quota預留並發數總和等於一級Quota的預留並發數。
預設二級Quota的預留並發數不可編輯,由一級Quota預留並發數減去自訂二級Quota的預留並發數之和計算所得。
弹性预留并发数
包月彈性預留並發數。
一級Quota的彈性預留並發數需要小於或等於該一級Quota的預留並發數,預設為0。
二級Quota的彈性預留並發數規定如下:
所有二級Quota彈性預留並發數總和為一級Quota的彈性預留並發數。
預設二級Quota的彈性預留並發數不可編輯,由一級Quota彈性預留並發數減去自訂二級Quota的彈性預留並發數之和計算所得。
刪除Quota
在Quota配置頁面,選擇基础配置頁簽,單擊目標Quota對應操作列的删除。
二級Quota被刪除後,此二級Quota將在所有的Quota資源配置方案裡被刪除,對應的预留并发数和弹性预留并发数將加到預設二級Quota中,如需要調整請編輯更新伸缩配置頁簽中的各個配置方案。
Quota伸縮配置
購買訂用帳戶MaxCompute專案後,每個一級Quota都會有一個名稱為
Default的預設資源配置方案。每個資源配置方案包含一級Quota及其下所有二級Quota的預留並發數和彈性預留並發數配置,多個配置方案結合分時管理,常用於一天內不同時段有不同配置的情境。例如,在每天00:00~08:00和08:00~24:00兩個時段,二級Quota的CU量需求不同,則可以配置兩個Quota配置方案,通過分時管理進行調度。
說明一個Quota資源群組最多支援48個分時區間,單個分時區間的最短時間長度為30分鐘。
當前Data Transmission Service進行分時配置後,如果需要對Data Transmission Service(訂用帳戶)做降配操作,請先調低分時並發數。
分時配置生效時間為0~5分鐘,且計費會按照實際生效時間開始計算。
在Quota配置頁面,選擇伸缩配置頁簽。
在伸缩配置頁簽,單擊新增配置方案,在彈出的新增配置方案對話方塊,填寫配置方案名称,並為二級Quota配置预留并发数和弹性预留并发数。
單擊確定,完成新增。
在伸缩配置頁簽,單擊目標配置方案對應的操作列的立即生效,可使該配置方案立即生效。也可在分时管理配置時使用已有方案。
任意配置方案均可操作立即生效,但需注意若已設定分時管理調度,則會被下一個分時覆蓋。因此如果想固定手動生效某個方案,需要清除其他所有分時設定,只保留該手動生效的方案,以確保當前操作能夠立即生效而不被覆蓋。
(可選)資源配置方案的其他相關操作如下:
查看配置方案
在伸缩配置頁簽,單擊配置方案名称左側的
表徵圖,展開方案詳情,查看各方案的具體資訊。編輯配置方案
在伸缩配置頁簽,單擊目標配置方案對應的操作列的编辑,更新配置方案。
若該方案為當前生效方案,則編輯成功後,還需要單擊操作列的立即生效才能啟用最新的配置。
刪除配置方案
在伸缩配置頁簽,單擊目標配置方案對應的操作列的删除,即可刪除配置方案。
Default方案和當前生效的方案不可刪除。
複製配置方案
在伸缩配置頁簽,單擊目標配置方案對應的操作列的克隆,即可複製出一個新方案。
分時管理
可以設定每日不同時間點啟用不同的Quota配置方案,以此實現對Quota配置的分時管理。
說明支援添加多個資源配置方案,每個方案配置不同,以便每日不同時段啟用相應的方案,分時管理中最多支援48個配置方案被添加到時間計劃中。
分時調度會有一定的延遲,預計延遲時間為5分鐘以內。
在伸缩配置頁簽,單擊分时管理地區的编辑时间计划。
單擊新增生效时间段,選擇生效開始時間和配置方案计划。
說明時間計劃整體只有一份,預設已耗用時間為00:00(不可修改和刪除),對應啟用配置方案是Default(可修改)。如果沒有增加已耗用時間,則代表全天都是啟用同一個配置方案。
支援整點和半點鐘啟用不同的配置方案,一個配置方案可以被重複啟用。
查看Quota消耗
查看各個二級Quota內Data Transmission Service的資源消耗情況。預設主帳號及其子帳號都可查看。
操作流程如下:
登入MaxCompute控制台,在左上方選擇地區。
在左側導覽列,選擇 。
在Quota管理頁面,單擊目標Quota對應操作列的资源消耗。
查看當前Data Transmission Service(訂用帳戶)獨享資源群組的使用方式。
指標名稱
說明
请求并发数
根據過濾條件展示對應Slot用量的曲線圖,包含當前用量和Quota用量上限,單位為Slot。
吞吐量
根據過濾條件展示對應輸送量的曲線圖,單位以縱座標展示單位為準,如B/min或MB/min。
表级别请求并发数
展示過濾條件下,使用Tunnel Batch方式上傳到testtable表的並發數曲線圖,單位為Slot。
過濾條件可選擇使用方式(例如:Tunnel Batch上傳)及表名称(例如:testtable)。
表级别IP吞吐量
展示過濾條件下,使用Tunnel Batch方式上傳testtable表的各訪問來源IP的輸送量曲線圖。
過濾條件可選擇使用方式(例如:Tunnel Batch上傳)及表名称(例如:testtable)。
总请求数和错误请求数
根據過濾條件展示對應的總請求數和各類錯誤請求數量。其中:
總請求數:是所有成功請求和錯誤請求的總和。
錯誤請求數:指所有狀態代碼為4XX或5XX的請求,詳細的狀態代碼含義請參考文檔Data Transmission Service概述。
数据量汇总
根據過濾條件展示對應時間範圍內,不同使用方式的資料量匯總,並通過餅圖展示不同使用方式的佔比。
槽位平均传输速率
展示過濾條件下,使用Tunnel Batch方式上傳的請求單個Slot的平均傳輸速率。
過濾條件可選擇使用方式(例如:Tunnel Batch上傳)。