Ketika beberapa Proyek MaxCompute memerlukan jumlah resource komputasi (CU) yang berbeda, Anda dapat mengisolasi CU langganan berdasarkan proyek melalui fitur manajemen kuota di Konsol MaxCompute untuk memaksimalkan pemanfaatan resource.
Informasi latar belakang
Anda dapat menggunakan fitur manajemen kuota di Konsol MaxCompute untuk mengisolasi CU langganan yang telah dibeli. Fitur Quotas mendukung jenis kelompok kuota berikut:
-
kuota langganan default: Kelompok kuota ini dibuat secara otomatis saat Anda membeli resource komputasi langganan. Anda tidak dapat memodifikasi kelompok kuota ini. Ketika Anda melakukan upgrade atau downgrade resource, jumlah CU dalam kelompok kuota ini akan bertambah atau berkurang sesuai perubahan tersebut.
-
kelompok kuota kustom: Untuk kelompok kuota kustom, nilai Reserved CUs [minCU,maxCU] dikurangkan dari kelompok kuota langganan default. Nilai maxCU dapat diatur hingga jumlah total CU reservasi yang telah dibeli. Parameter tersebut adalah sebagai berikut:
-
minCU: Jumlah minimum CU yang dijamin.
-
maxCU: Jumlah maksimum CU yang dapat digunakan oleh kelompok kuota. Jika Anda mengonfigurasi beberapa kelompok kuota dengan minCU < maxCU, suatu kelompok kuota dapat meminjam CU idle dari kelompok lain. Hal ini memungkinkan semua kelompok kuota dalam akun dan Wilayah yang sama berbagi kolam sumber daya.
-
Jumlah total nilai minCU dari seluruh kelompok kuota harus sama dengan jumlah total CU reservasi yang telah dibeli.
Kasus penggunaan
Skenario
Sebuah tim gudang data menggunakan MaxCompute untuk pengembangan dan produksi gudang data, analisis operasional, serta penambangan algoritma. Tim tersebut membuat Proyek MaxCompute terpisah untuk masing-masing aktivitas:
-
Pengembangan dan produksi gudang data: Proyek dibagi menjadi lingkungan pengembangan dan lingkungan produksi berdasarkan lapisan model gudang data.
-
Analis operasional: Proyek khusus dibuat untuk departemen berbeda guna mengambil dan menganalisis data operasional harian.
-
Penambangan algoritma: Proyek dipisahkan menjadi pengembangan dan produksi berdasarkan karakteristik siklus pekerjaannya.
Berdasarkan penilaian awal kebutuhan bisnis, tim tersebut membeli 1.000 CU reservasi dan perlu mengalokasikan serta mengisolasi CU tersebut berdasarkan proyek untuk memaksimalkan pemanfaatannya.
Alokasikan CUs
Saat mengalokasikan CU, pertimbangkan hal-hal berikut:
-
Konfigurasikan minCU untuk Reserved CUs berdasarkan kebutuhan aktual guna mencegah penyalahgunaan resource.
-
Untuk proyek berprioritas rendah yang tidak memerlukan Ketersediaan tinggi tetapi mungkin meminta jumlah CU besar, batasi maxCU untuk Reserved CUs dalam kelompok kuota terkait agar tidak mengganggu kelompok kuota lain.
-
Untuk Proyek MaxCompute dengan Pekerjaan berjalan lama, buat kelompok kuota khusus dan batasi maxCU untuk Reserved CUs dalam kelompok kuota tersebut.
-
Anda dapat menggunakan fitur konfigurasi berbasis waktu untuk memaksimalkan pemanfaatan CU. Untuk informasi lebih lanjut, lihat Computing Resources - Quota Management.
-
Kuota CU kelompok kuota langganan default tidak dapat dimodifikasi. Untuk mencegah Pekerjaan dari proyek tertentu menghabiskan seluruh CU yang tersedia, jangan mengaitkan proyek apa pun dengan kelompok kuota langganan default. Nilai minCU untuk Reserved CUs pada kelompok kuota langganan default tidak boleh 0. Anda dapat menyisakan 1 CU untuk kelompok ini dan atur minCU < maxCU untuk kelompok kuota lain. Hal ini memungkinkan kelompok kuota lain menggunakan 1 CU tersebut.
Rancang kelompok kuota
|
Quota group |
Characteristics |
Reserved minCU |
Reserved maxCU |
Associated project |
Time configuration |
|
Data warehouse production quota group |
Workload dengan jaminan tinggi, permintaan CU signifikan pada jam sibuk, dan permintaan CU stabil per jam. |
|
|
Data warehouse production project |
|
|
Data warehouse development quota group |
Workload dengan jaminan tinggi dan permintaan CU signifikan di luar jam sibuk. |
|
|
Data warehouse development project |
|
|
Algorithm production quota group |
Workload dengan jaminan tinggi dan beberapa Pekerjaan berjalan lama yang intensif resource. |
300 |
300 |
Algorithm production project |
00:00:00–23:59:59 |
|
Algorithm development quota group |
Workload dengan jaminan tinggi dan beberapa Pekerjaan berjalan lama yang intensif resource. |
50 |
50 |
Algorithm development project |
00:00:00–23:59:59 |
|
Operational analysis quota group |
Permintaan mencapai puncaknya selama jam kerja dan mencakup beberapa Pekerjaan berjalan lama yang intensif resource secara berkala. |
|
|
Operational analysis project |
|
Mengingat karakteristik bisnis tersebut, nilai maxCU untuk reserved CUs setiap kelompok kuota dibatasi agar tidak memengaruhi jaminan minimum kelompok lain. Dalam rancangan ini, kelompok kuota langganan default tidak dikaitkan dengan Proyek MaxCompute apa pun. Karena nilai minCU-nya untuk Reserved CUs harus lebih besar dari nol, kami menetapkannya menjadi 1 CU. Untuk menyeimbangkan total, kami mengurangi minCU proyek pengembangan gudang data sebesar 1.
Prosedur
-
Konfigurasikan periode waktu. Tambahkan dua periode, yaitu 00:00:00–09:00:00 dan 09:00:00–23:59:59. Untuk informasi lebih lanjut, lihat Computing Resources - Quota Management.
-
Berdasarkan rencana Anda, buat kelompok kuota baru: kelompok kuota produksi gudang data, pengembangan gudang data, produksi algoritma, pengembangan algoritma, dan analisis operasional. Untuk informasi lebih lanjut, lihat Configure Quotas.
-
Kaitkan proyek Anda dengan kelompok kuota yang sesuai. Kuota langganan default yang dibuat saat pembelian tidak secara otomatis dikaitkan dengan proyek apa pun dan harus dikaitkan secara manual.
Catatan-
Untuk mengaitkan kelompok kuota di tingkat proyek, lihat Manage projects. Pada tab Parameter Configuration, konfigurasikan Default Compute Quota untuk proyek target.
-
Untuk mengaitkan kelompok kuota di tingkat Pekerjaan, lihat Quota Rules dan konfigurasikan kuota untuk Pekerjaan target.
-
Referensi
-
Saat bisnis Anda berkembang, pantau penggunaan kelompok kuota secara berkala dan sesuaikan alokasi jika diperlukan. Anda dapat menggunakan metrik MaxCompute subscription quota group resources di CloudMonitor untuk melacak penggunaan. Untuk informasi lebih lanjut, lihat Pemantauan dan alert.
-
Untuk kontrol resource yang lebih detail halus, lihat Elastically Reserved CUs Best Practices, Use Quotas for Computing Resources, dan job priority.
-
Untuk mempelajari cara melakukan kueri terhadap Penggunaan resource komputasi (CU) Anda, lihat Pengamatan resource.