Membuat, memodifikasi, dan menghapus kelompok sumber daya - AnalyticDB

Dokumen ini menjelaskan cara membuat dan mengelola kelompok sumber daya di AnalyticDB for MySQL. Dokumen ini mencakup topik-topik seperti aturan penagihan serta cara membuat, memodifikasi, menghapus, dan memantau kelompok sumber daya.

Batasan

Sebuah kluster Edisi Gudang Data harus memenuhi persyaratan berikut:

Mode adalah Mode Elastis.
Sumber daya komputasi minimal 32 core.
Versi kernel minimal 3.1.3.2 atau yang lebih baru.
Catatan
Untuk melihat dan memperbarui versi minor dari kluster AnalyticDB for MySQL, masuk ke Konsol AnalyticDB for MySQL dan pergi ke bagian Configuration Information pada halaman Cluster Information.

Penagihan

Edisi Perusahaan, Edisi Dasar, atau Edisi Danau Data

Sumber daya elastis yang digunakan oleh kelompok sumber daya Interaktif dan Pekerjaan ditagih berdasarkan penggunaan Unit Komputasi AnalyticDB (ACU).
Untuk kelompok sumber daya AI dengan tipe penyebaran Ray Cluster:
- Jika Worker Resource Type disetel ke CPU, sumber daya elastis yang digunakan oleh kelompok sumber daya AI ditagih berdasarkan penggunaan ACU.
- Jika Worker Resource Type disetel ke GPU, kelompok sumber daya AI ditagih berdasarkan spesifikasi dan jumlah GPU.
- Worker Disk Space ditagih berdasarkan ukuran penyimpanan yang dikonfigurasi.

Anda dapat melihat penggunaan sumber daya elastis dari sebuah kelompok sumber daya sebagai berikut:

Untuk kluster Edisi Perusahaan dan Edisi Dasar: Di halaman Resource Overview, yang berada di bawah Cluster Management > Resource Management, Anda dapat melihat total sumber daya dan sumber daya yang dicadangkan yang digunakan oleh semua kelompok sumber daya. Penggunaan sumber daya elastis adalah selisih antara total sumber daya dan sumber daya yang dicadangkan.
Untuk kluster Edisi Danau Data: Di halaman Resource Overview, yang berada di bawah Cluster Management > Resource Management, Anda dapat melihat total sumber daya komputasi dan sumber daya komputasi yang dicadangkan yang digunakan oleh semua kelompok sumber daya. Penggunaan sumber daya elastis adalah selisih antara total sumber daya komputasi dan sumber daya komputasi yang dicadangkan.

Edisi Gudang Data

Biaya untuk kelompok sumber daya sama dengan biaya untuk sumber daya komputasi. Anda hanya dikenakan biaya untuk sumber daya komputasi yang Anda gunakan.

Buat kelompok sumber daya

Edisi Perusahaan, Edisi Dasar, atau Edisi Danau Data

Secara default, setiap kluster memiliki kelompok sumber daya Interaktif bernama user_default. Untuk kluster baru dengan versi kernel 3.2.2.8 atau yang lebih baru, kelompok sumber daya Pekerjaan bernama serverless juga dibuat secara default. Jika tidak ada kelompok sumber daya lain yang dibuat, semua kueri XIHE dieksekusi oleh kelompok sumber daya user_default, dan semua pekerjaan Spark, termasuk pekerjaan Spark Jar dan Spark SQL, dieksekusi oleh kelompok sumber daya serverless. Anda dapat membuat kelompok sumber daya baru untuk mengisolasi sumber daya untuk kueri.

Masuk ke Konsol AnalyticDB for MySQL. Di pojok kiri atas konsol, pilih wilayah. Di panel navigasi di sebelah kiri, klik Clusters. Temukan kluster yang ingin Anda kelola dan klik ID kluster.
Di panel navigasi di sebelah kiri, pilih Cluster Management > Resource Management, lalu klik tab Resource Groups. Di pojok kanan atas daftar kelompok sumber daya, klik Create Resource Group.
Masukkan nama untuk kelompok sumber daya dan pilih Job Type.
- Untuk skenario online yang memerlukan permintaan per detik (QPS) tinggi dan waktu respons (RT) rendah, pilih Interaktif.
  Kelompok sumber daya Interaktif menggunakan sumber daya komputasi tetap untuk mengeksekusi kueri dalam mode Pemrosesan Paralel Masif (MPP). Ini memberikan waktu respons cepat, biasanya pada level milidetik.
- Untuk skenario offline yang memerlukan throughput tinggi, pilih Pekerjaan.
  Kelompok sumber daya Pekerjaan memulai sumber daya komputasi sementara dan mengeksekusi kueri dalam mode Bulk Synchronous Parallel (BSP). Ini menghasilkan waktu respons yang lebih lambat, biasanya pada level detik atau menit. Jumlah sumber daya komputasi sementara yang dimulai berada antara 0 ACU dan sumber daya maksimum dari kelompok sumber daya Pekerjaan. Jumlah spesifik tergantung pada ukuran tugas yang sedang berjalan.
- Untuk skenario komputasi heterogen, pilih AI.
  Kelompok sumber daya AI mendukung sumber daya komputasi heterogen seperti GPU dan CPU. Mereka mendukung beberapa tipe penyebaran, termasuk model MLSQL dan komputasi yang di-hosted Ray.
Penting
Tipe tugas tidak dapat dimodifikasi setelah kelompok sumber daya dibuat.

Properti yang perlu dikonfigurasi bervariasi berdasarkan tipe tugas yang dipilih. Setelah Anda mengonfigurasi properti, klik OK.

Properti kelompok sumber daya Interaktif

Parameter	Deskripsi
Engine	XIHE Engine: Kelompok sumber daya hanya mendukung XIHE SQL. Spark Engine: Kelompok sumber daya hanya mendukung pekerjaan Spark SQL. Pekerjaan Spark SQL diproses secara interaktif. Penting Mesin tidak dapat dimodifikasi setelah kelompok sumber daya dibuat.
Automatic Stop	Ketika kelompok sumber daya Interaktif menganggur selama periode tertentu, kluster yang diaktifkan dalam kelompok sumber daya secara otomatis dilepaskan. Status menganggur berarti beberapa menit telah berlalu sejak perintah terakhir dieksekusi. Mengaktifkan pemberhentian otomatis mengurangi pemborosan sumber daya dan menghemat biaya. Namun, ketika Anda mengeksekusi kueri lagi, sumber daya harus dihidupkan ulang, yang menyebabkan penundaan. Penting Parameter ini tersedia hanya ketika Engine disetel ke Spark.
Cluster Size	Jika Engine disetel ke XIHE: Ukuran satu kluster dalam ACU. Anda dapat memasukkan nilai apa pun. Nilai minimumnya adalah 16 ACU. Jika Engine disetel ke Spark: Ukuran satu kluster, yaitu jumlah ACU yang dialokasikan ke aplikasi Spark. Nilai minimumnya adalah 24 ACU. Beberapa aplikasi Spark dapat berjalan di setiap kelompok sumber daya Spark Interaktif. Parameter Minimum Clusters dan Maximum Clusters menentukan jumlah aplikasi Spark yang dapat berjalan di kelompok sumber daya. Untuk informasi lebih lanjut tentang pemetaan antara ukuran kluster dan spesifikasi Spark Drivers dan Spark Executors, lihat Lampiran: Pemetaan antara ukuran kluster dan spesifikasi Spark Driver dan Spark Executor.
Minimum Clusters Maximum Clusters	Minimum Clusters: Jumlah minimum kluster yang harus berjalan di kelompok sumber daya. Nilai minimumnya adalah 1. Maximum Clusters: Jumlah maksimum kluster ke mana kelompok sumber daya dapat diskalakan. Nilai maksimumnya adalah 10. Jika Minimum Clusters dan Maximum Clusters berbeda, AnalyticDB for MySQL secara dinamis menskalakan jumlah kluster antara nilai minimum dan maksimum berdasarkan muatan kueri kelompok sumber daya. Jika Minimum Clusters dan Maximum Clusters sama, AnalyticDB for MySQL memulai jumlah kluster yang ditentukan setelah kelompok sumber daya dibuat. Ini memungkinkan Anda mengontrol total sumber daya komputasi kelompok sumber daya secara statis. Catatan Jika Minimum Clusters atau Maximum Clusters disetel ke 2 atau lebih, fitur Multi-Kluster diaktifkan untuk kelompok sumber daya. Untuk informasi lebih lanjut tentang fitur Multi-Kluster, lihat Model elastis Multi-Kluster.
Job Resubmission Rules	Mengirimkan kueri yang melebihi Ambang Waktu Eksekusi Kueri ke Kelompok Sumber Daya Target untuk eksekusi. Untuk informasi lebih lanjut, lihat Pengiriman Pekerjaan. Penting Parameter ini tersedia hanya ketika Engine disetel ke XIHE.
Spark Configuration	Parameter konfigurasi aplikasi Spark. Parameter ini berlaku untuk semua pekerjaan Spark yang dieksekusi di kelompok sumber daya ini. Untuk mengonfigurasi parameter untuk pekerjaan Spark tertentu, Anda dapat menyetelnya di kode saat Anda mengirimkan pekerjaan. Untuk informasi lebih lanjut tentang parameter konfigurasi Spark, lihat Parameter konfigurasi aplikasi Spark. Penting Parameter ini tersedia hanya ketika Engine disetel ke Spark.

Properti kelompok sumber daya Pekerjaan

Parameter	Deskripsi
Minimum Computing Resources	Nilai minimumnya adalah 0 ACU. Penting Sumber Daya Komputasi Minimum tidak dapat dimodifikasi setelah kelompok sumber daya dibuat.
Maximum Computing Resources	Nilai maksimum yang dapat disetel di konsol adalah 1024 ACU, dengan ukuran langkah 8 ACU. Jika Anda membutuhkan lebih banyak sumber daya, kirim tiket untuk menghubungi dukungan teknis.
Spot Instance	Menentukan apakah akan mengaktifkan instans spot. Jika Anda mengaktifkan instans spot, pekerjaan Spark yang berjalan di kelompok sumber daya Pekerjaan akan mencoba menggunakan sumber daya instans spot. Untuk informasi lebih lanjut, lihat Instans Spot.
Spark Configuration	Parameter konfigurasi aplikasi Spark. Parameter ini berlaku untuk semua pekerjaan Spark yang dieksekusi di kelompok sumber daya ini. Untuk mengonfigurasi parameter untuk pekerjaan Spark tertentu, Anda dapat menyetelnya di kode saat Anda mengirimkan pekerjaan. Untuk informasi lebih lanjut tentang parameter konfigurasi Spark, lihat Parameter konfigurasi aplikasi Spark.

Kelompok sumber daya AI

Parameter	Deskripsi
Deployment Mode	Pilih RayCluster.
Head Resource Specifications	Node Head mengelola metadata Ray, menjalankan layanan Global Control Store (GCS), dan berpartisipasi dalam penjadwalan tugas, tetapi tidak mengeksekusi tugas. Spesifikasi sumber daya Head adalah jumlah core CPU. Anda dapat memilih spesifikasi seperti kecil, m.xlarge, dan m.2xlarge. Jumlah core CPU untuk setiap spesifikasi sama dengan spesifikasi sumber daya Spark. Untuk informasi lebih lanjut, lihat Daftar spesifikasi sumber daya Spark. Penting Node Head terutama bertanggung jawab atas penjadwalan pekerjaan. Pilih spesifikasi Head berdasarkan ukuran keseluruhan Ray Cluster.
Worker Group Name	Nama kustom untuk Grup Pekerja. Anda dapat mengonfigurasi beberapa Grup Pekerja dengan nama berbeda dalam satu kelompok sumber daya AI.
Worker Resource Type	Mendukung CPU dan GPU. Jika bisnis Anda melibatkan tugas komputasi harian, multitasking, atau operasi logika kompleks, pilih CPU. Jika bisnis Anda melibatkan pemrosesan data skala besar secara paralel, pembelajaran mesin, atau pelatihan pembelajaran mendalam, pilih GPU.
Worker Resource Specifications	Jika Worker Resource Type disetel ke CPU, Anda dapat memilih spesifikasi seperti kecil, m.xlarge, dan m.2xlarge untuk spesifikasi sumber daya Pekerja. Jumlah core CPU untuk setiap spesifikasi sama dengan spesifikasi sumber daya Spark. Untuk informasi lebih lanjut, lihat Daftar spesifikasi sumber daya Spark. Jika Worker Resource Type disetel ke GPU, karena masalah terkait model GPU dan inventaris, kirim tiket untuk menghubungi dukungan teknis guna membantu pemilihan model.
Worker Disk Storage	Ruang disk utamanya digunakan untuk menyimpan log Ray, data sementara, dan data overflow dari penyimpanan objek terdistribusi Ray. Unit: GB. Rentang nilai: [30, 2000]. Nilai default: 100 GB. Penting Disk ini hanya untuk penyimpanan sementara. Jangan gunakan untuk penyimpanan data jangka panjang.
Minimum Workers Maximum Workers	Minimum Workers: Jumlah minimum Pekerja yang harus berjalan dalam Grup Pekerja. Nilai minimumnya adalah 1. Maximum Workers: Jumlah maksimum Pekerja ke mana Grup Pekerja dapat diskalakan. Nilai maksimumnya adalah 8. Grup Pekerja mendukung penskalan otomatis, dan setiap Grup Pekerja dapat diskalakan secara independen. Jika Pekerja Minimum dan Pekerja Maksimum berbeda, AnalyticDB for MySQL secara dinamis menskalakan jumlah Pekerja antara nilai minimum dan maksimum berdasarkan jumlah tugas. Jika ada beberapa Grup Pekerja, mereka akan secara otomatis dicocokkan untuk menghindari beban berlebih atau pengangguran pada satu Grup Pekerja.
Allocation Unit	Jumlah GPU yang dialokasikan pada satu node Pekerja. Misalnya, unit alokasi 1/3 berarti 1/3 GPU dikonfigurasikan untuk setiap node Pekerja. Penting Parameter ini diperlukan hanya ketika Worker Resource Type disetel ke GPU.

Edisi Gudang Data

Masuk ke Konsol AnalyticDB for MySQL. Di pojok kiri atas konsol, pilih wilayah. Di panel navigasi di sebelah kiri, klik Clusters. Temukan kluster yang ingin Anda kelola dan klik ID kluster.
Di panel navigasi di sebelah kiri, klik Resource Group Management.
Di halaman Resource Group Management, klik Create Resource Group di pojok kanan atas daftar kelompok sumber daya.

Konfigurasikan informasi kelompok sumber daya.

Parameter	Deskripsi
Resource Group Name	Nama kustom untuk kelompok sumber daya. Nama harus memiliki panjang 2 hingga 30 karakter, dimulai dengan huruf, dan hanya boleh berisi huruf, angka, dan garis bawah (_).
Query Type	Tipe kueri SQL yang sering digunakan dalam kelompok sumber daya ini. Untuk informasi lebih lanjut, lihat Mode eksekusi kueri. Default_Type: Tipe kueri default. Batch: Cocok untuk kueri kompleks pada volume data besar, seperti kueri Extract-Transform-Load (ETL). Tipe ini mendukung penulisan hasil data perantara ke disk. Performa kueri mungkin menurun dengan volume data besar, tetapi node komputasi tidak akan gagal karena data yang berlebihan. Interactive: Cocok untuk kueri analisis waktu nyata yang memerlukan latensi rendah. Ini adalah tipe kueri interaktif berbasis memori yang cepat dan menawarkan performa baik. Namun, kueri akan gagal jika jumlah data melebihi kapasitas pemrosesan mesin.
Resource Amount	Pilih jumlah sumber daya yang akan dialokasikan ke kelompok sumber daya sesuai kebutuhan.

Klik OK untuk membuat kelompok sumber daya.

Memodifikasi kelompok sumber daya

Edisi Perusahaan, Edisi Dasar, atau Edisi Danau Data

Properti yang Dapat Dimodifikasi

Untuk kelompok sumber daya kustom (kelompok sumber daya yang Anda buat), Anda dapat memodifikasi properti berikut:
- Untuk kelompok sumber daya Interaktif: Auto Stop, Cluster Size, Min Clusters, Max Clusters, Job Delivery Rule, dan Spark Configuration.
- Untuk kelompok sumber daya Pekerjaan: Sumber Daya Komputasi Maksimum, Instans Spot, dan Konfigurasi Spark.
- Untuk kelompok sumber daya AI (tipe penyebaran Ray Cluster): Spesifikasi Sumber Daya Head, Tipe Sumber Daya Pekerja, Spesifikasi Sumber Daya Pekerja, Ruang Disk Pekerja, Pekerja Minimum, dan Pekerja Maksimum.
Properti lainnya tidak dapat dimodifikasi, termasuk Nama Kelompok Sumber Daya, Tipe Tugas, Mesin dari kelompok sumber daya Interaktif, Sumber Daya Komputasi Minimum dari kelompok sumber daya Pekerjaan, dan Tipe Penyebaran dan Nama Grup Pekerja dari kelompok sumber daya AI.
Untuk kelompok sumber daya default (kelompok sumber daya bernama user_default dan serverless):
- Untuk kelompok sumber daya user_default di Edisi Perusahaan dan Edisi Dasar kluster, Anda hanya dapat memodifikasi Aturan Pengiriman Pekerjaan. Anda tidak dapat memodifikasi properti apa pun dari kelompok sumber daya serverless.
- Untuk kelompok sumber daya user_default di Edisi Danau Data kluster, Anda dapat memodifikasi Sumber Daya Komputasi yang Dicadangkan dan Aturan Pengiriman Pekerjaan. Anda tidak dapat memodifikasi properti apa pun dari kelompok sumber daya serverless.

Prosedur

Di halaman Resource Groups, temukan kelompok sumber daya target dan klik Modify di kolom Actions.
Di panel Modify Resource Group yang muncul, modifikasi nilai properti. Lalu, klik OK.
Modifikasi berlaku ketika status kelompok sumber daya berubah menjadi Berjalan.

Edisi Gudang Data

Setelah kelompok sumber daya dibuat, Anda dapat memodifikasi tipe kuerinya atau jumlah sumber daya.

Properti yang Dapat Dimodifikasi

Setelah kelompok sumber daya dibuat, Anda dapat memodifikasi tipe kuerinya atau jumlah sumber daya.

Untuk kelompok sumber daya default (bernama user_default), Anda hanya dapat memodifikasi tipe kueri. Anda tidak dapat memodifikasi jumlah sumber daya secara manual.
Catatan
Jumlah sumber daya kelompok sumber daya default dihitung dengan mengurangi sumber daya yang digunakan oleh kelompok sumber daya lain di kluster dari total sumber daya kluster.
Untuk kelompok sumber daya kustom (kelompok sumber daya yang Anda buat), Anda dapat memodifikasi tipe kueri dan jumlah sumber daya.

Prosedur

Di halaman Resource Group Management, temukan kelompok sumber daya target dan klik Modify di kolom Actions.
Modifikasi Query Type atau Resource Amount sesuai kebutuhan.
Setelah Anda selesai melakukan modifikasi, klik OK.
Modifikasi terhadap jumlah sumber daya kelompok sumber daya AnalyticDB for MySQL berlaku secara real-time.

Menghapus kelompok sumber daya

Anda tidak dapat menghapus kelompok sumber daya default, seperti kelompok sumber daya user_default dan serverless.

Dampak Menghapus Kelompok Sumber Daya

Menghapus kelompok sumber daya akan mengganggu tugas apa pun yang sedang berjalan di dalamnya.
Jika Anda menghapus kelompok sumber daya yang ditentukan dalam skrip SQL XIHE atau pekerjaan Spark, Anda harus memperbarui skrip atau pekerjaan tersebut untuk menggunakan kelompok sumber daya lain. Jika tidak, pekerjaan SQL XIHE akan berjalan di kelompok sumber daya default, dan pekerjaan Spark akan gagal.

Prosedur

Di halaman Resource Groups, klik Delete pada kolom Actions untuk kelompok sumber daya target. Pada kotak dialog yang muncul, klik OK.

Memantau penggunaan sumber daya (Edisi Perusahaan, Edisi Dasar, atau Edisi Danau Data)

Anda dapat melihat penggunaan sumber daya di tingkat kluster, beban sumber daya di tingkat kelompok sumber daya, serta konsumsi sumber daya di tingkat pekerjaan. Untuk informasi lebih lanjut tentang setiap metrik, lihat Pemantauan Kelompok Sumber Daya.

Kueri sumber daya yang dicadangkan dan elastis untuk kluster

Untuk Edisi Perusahaan dan Edisi Dasar: Di halaman Cluster Management > Resource Management > Resource Overview, Anda dapat melihat Total Sumber Daya dan Sumber Daya yang Dicadangkan untuk semua kelompok sumber daya di kluster pada waktu tertentu. Penggunaan sumber daya elastis adalah selisih antara Total Sumber Daya dan Sumber Daya yang Dicadangkan.
Untuk Edisi Danau Data: Di halaman Cluster Management > Resource Management > Resource Overview, Anda dapat melihat Total Sumber Daya Komputasi dan Sumber Daya Komputasi yang Dicadangkan untuk semua kelompok sumber daya di kluster pada waktu tertentu. Penggunaan sumber daya elastis adalah selisih antara Total Sumber Daya Komputasi dan Sumber Daya Komputasi yang Dicadangkan.

Kueri sumber daya dan beban untuk satu kelompok sumber daya

Anda dapat melihat sumber daya komputasi yang digunakan oleh satu kelompok sumber daya. Anda juga dapat memantau beban kelompok sumber daya berdasarkan metrik seperti jumlah kueri SQL XIHE yang sedang berjalan dan dalam antrian, jumlah mesin Spark, serta jumlah koneksi.

Di halaman Cluster Management > Resource Management > Resource Groups, temukan kelompok sumber daya target dan klik Monitoring untuk melihat sumber daya komputasi yang digunakan oleh kelompok sumber daya tersebut.

Kueri sumber daya yang dikonsumsi oleh satu pekerjaan

Tab Job Usage Statistics menampilkan statistik konsumsi sumber daya untuk pekerjaan seperti pekerjaan BSP XIHE, pekerjaan Spark, serta tugas sinkronisasi data dan migrasi data SLS/Kafka di konsol AnalyticDB for MySQL.

Di halaman Cluster Management > Resource Management > Job Usage Statistics, Anda dapat melihat total, dicadangkan, elastis, dan sumber daya instans spot yang dikonsumsi oleh pekerjaan.

Tanya Jawab Umum

Kluster saya memiliki 32 ACU sumber daya yang dicadangkan. Apakah sumber daya ini dibagikan antara kelompok sumber daya default dan kelompok sumber daya kustom baru?

Jika Anda memiliki kluster Edisi Perusahaan atau Edisi Dasar, sumber daya yang dicadangkan hanya dapat sepenuhnya dialokasikan ke kelompok sumber daya default user_default. Kelompok sumber daya default serverless, kelompok sumber daya Pekerjaan baru, dan kelompok sumber daya Interaktif baru hanya dapat menggunakan sumber daya elastis.

Jika Anda memiliki kluster Edisi Danau Data, Anda dapat mengalokasikan sumber daya yang dicadangkan ke kelompok sumber daya default user_default, kelompok sumber daya default serverless, kelompok sumber daya Pekerjaan baru, atau kelompok sumber daya Interaktif baru. Jumlah sumber daya yang dicadangkan yang dialokasikan ke kelompok user_default ditentukan oleh nilai minimum dan maksimum sumber daya komputasinya. Sisa sumber daya yang dicadangkan dihitung dengan mengurangi sumber daya yang dialokasikan ke kelompok user_default dari total sumber daya yang dicadangkan kluster. Sisa sumber daya ini kemudian dapat dialokasikan ke kelompok sumber daya default serverless, kelompok sumber daya Pekerjaan baru, atau kelompok sumber daya Interaktif baru.

API Terkait

Anda dapat menggunakan OpenAPI untuk membuat, memodifikasi, dan menghapus kelompok sumber daya, serta untuk menyambungkan atau melepas akun database.

Untuk Edisi Perusahaan, Edisi Dasar, atau Edisi Danau Data, lihat Manajemen kelompok sumber daya.
Untuk Edisi Gudang Data, lihat Manajemen kelompok sumber daya.