MaxCompute:Menggunakan resource komputasi

Prasyarat

Sebelum memulai, pastikan Anda telah:

• Membuat quota group di MaxCompute (lihat Konfigurasi quota)

• Mendapatkan izin yang diperlukan untuk akun pemilik pekerjaan

Langkah 1: Memberikan izin

Secara default, tidak ada Akun Alibaba Cloud, RAM user, atau RAM role yang memiliki izin untuk menentukan quota pada tingkat pekerjaan. Berikan izin terlebih dahulu sebelum menetapkan quota.

Hanya Akun Alibaba Cloud atau RAM user yang diberi peran Super_Administrator tingkat tenant yang dapat melakukan operasi otorisasi ini.

Buat peran dengan izin quota:

1. Masuk ke Konsol MaxComputeKonsol MaxCompute dan pilih wilayah.

2. Di panel navigasi sebelah kiri, pilih Tenants > Roles.

3. Pada halaman Roles, klik Add Role.

4. Pada kotak dialog Add Role, masukkan nama peran dan Kebijakan berikut:

   Parameter	Deskripsi
   Action	Aksi yang diizinkan. odps:List dan odps:Usage wajib disertakan. Pisahkan beberapa aksi dengan koma. Untuk detailnya, lihat Izin MaxCompute dan Elemen kebijakan.
   Resource	Quota group yang diberi otorisasi. Format: ["acs:odps:Tenant/${tenant_id}:regions/${region_id}/quotas/${quota_name}"]. Nilai wildcard ["acs:odps:*:regions/*/quotas/*"] memberikan akses ke semua quota group di semua wilayah untuk tenant saat ini.

   {
       "Statement": [{
               "Action": [
                   "odps:List",
                   "odps:Usage"],
               "Effect": "Allow",
               "Resource": ["acs:odps:*:regions/*/quotas/*"]}],
       "Version": "1"
   }

5. Klik OK.

Tetapkan peran tersebut ke akun yang akan menentukan quota:

• Untuk Akun Alibaba Cloud, jalankan perintah berikut:

  -- Tambahkan Akun Alibaba Cloud ke tenant dan tetapkan peran.
  Add tenant user <Aliyun$xxxx>;
  Grant tenant role <role_name> to user <Aliyun$xxxx>;
  
  -- Verifikasi izin yang telah diberikan.
  Show grants for tenant role <role_name>;
  Show grants for tenant user <user_name>;
  Show principals for tenant [role] <role_name>;

• Untuk RAM user:

  1. Di panel navigasi sebelah kiri Konsol MaxComputeKonsol MaxCompute, pilih Tenants > Users.

  2. Temukan RAM user tersebut dan klik Modify Role di kolom Actions.

  3. Di kotak dialog Edit Role, pindahkan peran yang diperlukan dari Available Roles ke Added Roles.

  4. Klik OK.

ID RAM user menggunakan awalan p4_ (misalnya, p4_12344566777). ID RAM role menggunakan awalan v4_ (misalnya, v4_12344566776).

Langkah 2: Menetapkan quota ke pekerjaan

Tambahkan perintah berikut sebelum pernyataan SQL pekerjaan:

set odps.task.wlm.quota=<quota_name>;

Ganti <quota_name> dengan nama quota group. Gunakan kombinasi huruf dan angka untuk nama quota group. Nama quota group dalam bahasa Tionghoa yang sudah ada masih dapat digunakan. Parameter ini hanya berlaku untuk quota pemrosesan batch.

Untuk pekerjaan Spark, tambahkan odps.task.wlm.quota=<quota_name> sebagai parameter konfigurasi pekerjaan.

Catatan penggunaan untuk pekerjaan MaxCompute Query Acceleration (MCQA)

MaxCompute Query Acceleration (MCQA) menggunakan dua jenis quota: acceleration quota (tipe interaktif) untuk eksekusi cepat, dan rollback quota (tipe batch) sebagai cadangan.

• Sistem memilih acceleration quota secara otomatis saat MCQA diaktifkan. Perintah SET tidak dapat langsung menetapkan quota interaktif ke pekerjaan MCQA.

• Jika Anda menjalankan set odps.task.wlm.quota=<quota_name>; untuk pekerjaan MCQA, <quota_name> berfungsi sebagai tujuan rollback jika quota interaktif gagal—bukan sebagai quota utama pekerjaan tersebut. Pekerjaan MCQA tetap mengonsumsi resource dari quota komputasi default project.

• Jika odps.task.wlm.quota tidak ditetapkan, pekerjaan interaktif yang gagal akan fallback ke quota yang ditentukan oleh aturan quota. Jika tidak ada aturan quota yang cocok, maka akan fallback ke quota default project.

Untuk informasi lebih lanjut, lihat MaxCompute Query Acceleration.

Batasan

• Aturan quota berlaku untuk quota level-2 yang dibuat di Edisi Spot bayar sesuai penggunaan dan quota level-2 langganan.

• Maksimal 10 aturan per quota level-2.

• Maksimal 50 project dan 50 pemilik pekerjaan (UID) per aturan.

• Maksimal 5 pasangan kunci-nilai di bidang Job settings per aturan.

• Rentang valid Job priority: [0, 9].

Mode aturan

Setiap aturan beroperasi dalam salah satu dari tiga mode. Aturan dalam mode EXCLUSIVE dan ANTI memiliki prioritas lebih tinggi daripada aturan dalam mode NORMAL.

Konfigurasi aturan

1. Masuk ke Konsol MaxComputeKonsol MaxCompute dan pilih wilayah.

2. Di panel navigasi sebelah kiri, pilih Workspace > Quotas.

3. Di halaman Quotas, temukan quota level-1 dan klik ikon untuk memperluas quota level-2-nya.

4. Temukan quota level-2 dan klik Rule Configuration di kolom Actions.

5. Di kotak dialog Quota Rule Configuration, klik Add Rule, atau temukan aturan yang sudah ada dan klik Clone untuk membuat salinan.

6. Konfigurasikan parameter aturan: Aturan mulai berlaku sekitar 5 menit setelah dikonfigurasi.

   Dalam satu aturan, beberapa nilai di Project, Job type, dan Job settings memiliki hubungan AND. Setidaknya salah satu dari Job type, Job priority, Job owner, atau Job settings tidak boleh kosong.

   Parameter	Deskripsi
   Rule name	Hanya huruf, angka, dan garis bawah; harus dimulai dengan huruf.
   Rule mode	NORMAL, EXCLUSIVE, atau ANTI. Lihat Mode aturan di atas.
   Project	Project yang akan dicocokkan. Maksimal 50 project. Biarkan kosong untuk mencocokkan semua project.
   Job type	Jenis pekerjaan yang akan dicocokkan: SQL (pekerjaan SQL), SQLRT (pekerjaan SQL MCQA), SQLCost (pekerjaan estimasi biaya SQL), LOT (pekerjaan MapReduce), CUPID (pekerjaan Spark atau Mars), AlgoTask (pekerjaan Platform for AI (PAI)). Biarkan kosong untuk mencocokkan semua jenis.
   Job priority	Rentang prioritas yang akan dicocokkan, dalam format [min,max], seperti [0,3] untuk prioritas 0, 1, 2, dan 3. Biarkan kosong untuk mencocokkan semua prioritas.
   Job owner (account ID)	UID pemilik pekerjaan yang akan dicocokkan, satu per baris. Maksimal 50 UID. Beberapa UID memiliki hubungan OR. Biarkan kosong untuk mencocokkan semua pemilik.
   Job settings	Pasangan kunci-nilai dalam format Key=Value, satu per baris. Maksimal 5 pasangan. Beberapa pasangan memiliki hubungan AND. Tanda kutip tidak diperlukan. Biarkan kosong untuk mencocokkan semua pengaturan.

7. Klik OK.

Pertahankan jumlah aturan seminimal mungkin. Aturan quota, terutama yang menggunakan Job settings, memang fleksibel tetapi bisa sulit dipelihara jika digunakan secara berlebihan.

Contoh