Tambahkan node core atau node task ke klaster E-MapReduce (EMR) saat sumber daya komputasi atau penyimpanan tidak mencukupi. Proses scale-out tidak akan me-restart proses aplikasi pada node yang sudah ada.
Prasyarat
Sebelum memulai, pastikan Anda telah:
-
Membuat klaster EMR. Lihat Buat klaster.
Batasan
-
Anda hanya dapat menambahkan node core dan node task. Kelompok node master tidak dapat diperluas kapasitasnya.
-
Node baru mewarisi konfigurasi dari node yang sudah ada dalam kelompok node yang sama.
-
Untuk klaster Hadoop, Anda tidak dapat memperluas kapasitas kelompok node yang dibuat di tab Auto Scaling. Lihat Konfigurasi auto scaling (hanya untuk klaster Hadoop).
Catatan penggunaan
Klaster StarRocks: Jika klaster Anda berisi StarRocks yang ditingkatkan secara manual, proses scale-out dapat menyebabkan ketidakkonsistenan versi. Migrasikan data dan tugas Anda ke EMR Serverless StarRocks, yang kompatibel dengan StarRocks open-source dan mendukung peningkatan otomatis.
Perluas kapasitas klaster
-
Login ke Konsol EMR. Di panel navigasi sebelah kiri, klik EMR on ECS.
-
Di bilah navigasi atas, pilih wilayah tempat klaster Anda berada dan pilih kelompok sumber daya.
-
Pada halaman EMR on ECS, temukan klaster tersebut lalu klik Nodes di kolom Actions.
-
Di tab Nodes, temukan kelompok node yang akan diperluas kapasitasnya, lalu klik Scale Out di kolom Actions.
-
Pada kotak dialog Scale Out, konfigurasikan parameter berikut.
Parameter Deskripsi Node Group Name Nama kelompok node. Node Type Tipe kelompok node. Current Instance Type Informasi mengenai instans dalam kelompok node. Billing Method Metode penagihan yang diwarisi dari klaster. Tidak dapat diubah. Jika metode penagihannya adalah Subscription, Anda dapat mengaktifkan Auto-renewal dan mengatur Subscription Duration untuk node baru. Setelah Anda mengaktifkan perpanjangan otomatis, node akan diperpanjang secara otomatis 7 hari sebelum masa berlaku habis. Periode perpanjangan default adalah satu bulan. Anda dapat mengubah periode perpanjangan atau menonaktifkan perpanjangan otomatis di halaman Auto-renewal. vSwitch vSwitch yang dikonfigurasi untuk kelompok node. Current Quantity Jumlah instans yang saat ini ada dalam kelompok node. Added Instances Jumlah instans yang akan ditambahkan. Klik panah atau masukkan angka. Cluster Expiration Time Waktu kedaluwarsa klaster subscription. Terms of Service Baca dan setujui ketentuan sebelum melanjutkan. -
Klik OK.
Untuk login ke node yang baru ditambahkan, lihat Login ke klaster.
Langkah berikutnya
Setelah memperluas kapasitas kelompok node core yang menggunakan Hadoop Distributed File System (HDFS) sebagai penyimpanan, distribusi data di seluruh DataNode mungkin menjadi tidak seimbang. Jalankan HDFS Balancer untuk mendistribusikan ulang data tersebut. Lihat HDFS Balancer.
Referensi
-
Upgrade konfigurasi instans: Jika vCPU atau memori instans Elastic Compute Service (ECS) dalam kelompok node tidak lagi memenuhi kebutuhan Anda, tingkatkan tipe instans tersebut. Lihat Upgrade konfigurasi node.
-
Perluas penyimpanan: Untuk memperluas disk data klaster EMR, lihat Expand a disk.
-
Pemecahan masalah scale-out: Lihat FAQ tentang manajemen klaster.
-
Scale out melalui API: Gunakan operasi IncreaseNodes untuk melakukan scale-out secara terprogram.