Sebaiknya kelola kluster E-MapReduce (EMR) melalui Konsol EMR. Operasi yang dilakukan langsung di Konsol Elastic Compute Service (ECS) atau melalui ECS API dapat menyebabkan ketidakstabilan kluster, loss data, atau membuat kluster tidak dapat dipulihkan. Untuk daftar operasi yang dilarang di Konsol ECS, lihat Hal yang harus dihindari di Konsol ECS.
Jika Anda melakukan salah satu operasi terlarang yang tercantum di bawah ini, Anda bertanggung jawab penuh atas konsekuensi yang timbul.
Hal yang harus dihindari di Konsol ECS
Operasi berikut ini mengabaikan manajemen status internal EMR. Melakukannya akan mengakibatkan masalah seperti yang dijelaskan di bawah ini.
Operasi yang ditandai dengan risiko loss data dapat mengakibatkan kehilangan data permanen yang tidak dapat dipulihkan. Rencanakan arsitektur kluster Anda di muka untuk menghindari kebutuhan melakukan operasi ini.
| Operasi | Masalah yang terjadi | Alternatif |
|---|---|---|
Menghapus atau mengubah file etc/hosts | EMR tidak dapat menyelesaikan endpoint layanan pada node kluster, sehingga menyebabkan pengecualian layanan. | Tambahkan entri ke file hosts alih-alih mengubah atau menghapus entri yang ada. |
| Mengubah file konfigurasi Komponen di Konsol ECS | Saat layanan yang terpengaruh dimulai ulang, EMR akan menimpa perubahan tersebut. | Ubah parameter Komponen di Konsol EMR. |
| Deploy ulang Instans ECS melalui Konsol ECS atau ECS API | Layanan EMR terganggu. | Tidak ada |
| Menyambungkan disk ke node kluster melalui Konsol ECS atau ECS API | EMR tidak dapat mengenali atau menginisialisasi disk yang disambungkan, sehingga disk menjadi tidak tersedia. | Rencanakan kapasitas disk saat membuat kluster. |
| Melepaskan disk dari node kluster melalui Konsol ECS atau ECS API | Risiko loss data. EMR tidak mengetahui operasi pelepasan tersebut, dan data pada disk mungkin hilang. | Rencanakan kapasitas disk saat membuat kluster. |
| Menghapus node inti melalui Konsol ECS atau ECS API | Risiko loss data. Pekerjaan yang sedang berjalan pada node yang dihapus akan gagal, dan data yang disimpan pada node tersebut akan hilang. | Lakukan scale out kluster melalui Konsol EMR. |
| Menghapus node master melalui Konsol ECS atau ECS API | Risiko loss data. Untuk kluster Ketersediaan tinggi (HA): Alih bencana HDFS NameNode HA, YARN ResourceManager, atau HBase HMaster gagal—Anda harus membeli kluster baru untuk pemulihan. Untuk kluster non-HA: kluster menjadi tidak tersedia secara permanen tanpa jalur migrasi. | Jangan menghapus node master. Beli kluster baru jika diperlukan konfigurasi ulang. |
| Menghapus task node melalui Konsol ECS atau ECS API | Pekerjaan yang berjalan pada node yang dihapus langsung gagal. | Hapus task node melalui Konsol EMR. |
| Menghentikan layanan MySQL pada node master (Tipe MySQL Bawaan) | Instans MySQL pada master-1-1 mendukung Hive MetaStore, Oozie, dan Ranger. Menghentikannya akan memutus akses Komponen-komponen ini ke database metadata mereka. | Jangan menghentikan layanan MySQL bawaan. |
Mengubah password root MySQL pada master-1-1 (Tipe MySQL Bawaan) | Komponen seperti Hue atau Ranger kehilangan akses ke MySQL dan berhenti berfungsi. | Jangan mengubah password root MySQL untuk Instans MySQL bawaan. |
| Mengubah security group, VPC, atau vSwitch Instans ECS melalui Konsol ECS atau ECS API | Konektivitas jaringan antar-node terputus, dan Komponen kluster menjadi tidak tersedia. | Konfigurasikan jaringan sebelum membuat kluster. Hubungi dukungan jika perubahan diperlukan setelah pembuatan. |
| Mengubah metode penagihan melalui Konsol ECS atau ECS API | Perubahan metode penagihan tidak dapat dikembalikan. | Ubah metode penagihan di Konsol EMR sebagai gantinya. Peralihan dari pay-as-you-go ke subscription didukung; peralihan dari subscription ke pay-as-you-go tidak didukung. Lihat Beralih dari pay-as-you-go ke subscription. |
| Menghapus direktori terkait agen EMR | Kluster berhenti berfungsi sebagaimana mestinya. | Jangan menghapus direktori agen. Hubungi dukungan jika Anda perlu memecahkan masalah agen. |
Pertanyaan umum tentang kapasitas dan konfigurasi
Ruang disk kluster saya hampir habis.
Tingkatkan kapasitas disk yang ada, atau tambahkan node inti melalui Konsol EMR. Kluster EMR tidak mendukung penambahan disk.
Saya memiliki kapasitas disk berlebih dan ingin menguranginya.
Beli kluster baru dengan ukuran sesuai kebutuhan aktual Anda, lalu release kluster asli. Lihat Membuat kluster. Kluster EMR tidak mendukung skala turun disk.
Kluster saya tidak memiliki kapasitas komputasi yang cukup.
Tambahkan task node melalui Konsol EMR. Lihat Scale out kluster.
Saya memiliki kapasitas komputasi berlebih dan ingin melakukan scale-down.
Pendekatan yang digunakan bergantung pada metode penagihan Anda:
Pay-as-you-go: Hapus task node melalui Konsol EMR.
Subscription: Hentikan YARN NodeManager pada task node target, ubah metode penagihan Instans ECS tersebut menjadi pay-as-you-go di Konsol ECS, lalu release Instans tersebut.
Kluster saya menjalankan versi Komponen yang usang.
Beli kluster baru dengan versi yang Anda butuhkan. Lihat Membuat kluster. Upgrade Komponen individual pada kluster yang sedang berjalan tidak didukung.
Saya ingin mengonversi kluster non-HA menjadi kluster HA.
Kluster non-HA tidak dapat dikonversi menjadi kluster HA. Beli kluster HA sejak awal jika Ketersediaan tinggi diperlukan.
Saya perlu menjalankan perangkat lunak atau layanan pihak ketiga di EMR.
Gunakan tindakan bootstrap untuk menginstal perangkat lunak pihak ketiga saat membuat kluster. Jika Anda menginstal perangkat lunak secara manual setelah kluster dibuat, Anda harus menginstalnya kembali setiap kali menambahkan node.