E-MapReduce (EMR) menyediakan dasbor berbasis YARN yang memungkinkan Anda melihat pemanfaatan sumber daya dan efek penskalaan otomatis kluster. Anda juga dapat mengonfigurasi serta mengoptimalkan aturan penskalaan otomatis kustom berdasarkan metrik kluster YARN historis. Topik ini menjelaskan cara melihat informasi gambaran umum tentang sumber daya kluster EMR di Konsol EMR.
Prasyarat
Kluster DataLake atau kluster kustom telah dibuat dengan layanan YARN dipilih saat pembuatan kluster. Untuk informasi lebih lanjut, lihat Buat Kluster.
Prosedur
Metode 1: Lihat perbandingan pemanfaatan sumber daya YARN
Buka tab Auto Scaling.
Masuk ke Konsol EMR. Di panel navigasi sebelah kiri, klik EMR on ECS.
Di bilah navigasi atas, pilih wilayah tempat kluster Anda berada dan pilih grup sumber daya sesuai kebutuhan bisnis Anda.
Di halaman EMR on ECS, temukan kluster yang diinginkan dan klik nama kluster di kolom ID/Nama Kluster.
Klik tab Auto Scaling di bagian atas halaman detail kluster.
Di subtab Konfigurasikan Auto Scaling, lihat perbandingan pemanfaatan sumber daya YARN.
Anda dapat melihat garis tren yang menunjukkan perubahan dalam pemanfaatan sumber daya kluster selama 30 hari terakhir. Anda juga dapat membandingkan garis tren tersebut dengan perubahan pemanfaatan sumber daya kluster selama N hari terakhir untuk memeriksa apakah ada sumber daya kluster yang terbuang. N adalah bilangan bulat kurang dari 30. Sistem akan memeriksa pemanfaatan sumber daya kluster saat ini dan memberikan rekomendasi aturan penskalaan otomatis. Anda dapat mengonfigurasi penskalaan otomatis untuk grup node kluster berdasarkan aturan yang direkomendasikan.
Metode 2: Lihat data metrik YARN
Buka subtab Pemantauan Metrik.
Masuk ke Konsol EMR. Di panel navigasi sebelah kiri, klik EMR on ECS.
Di bilah navigasi atas, pilih wilayah tempat kluster Anda berada dan pilih grup sumber daya sesuai kebutuhan bisnis Anda.
Di halaman EMR on ECS, temukan kluster yang diinginkan dan klik nama kluster di kolom ID/Nama Kluster.
Klik tab Monitoring and Diagnostics di bagian atas halaman detail kluster.
Klik subtab Metric Monitoring.
Pilih YARN-HOME dari daftar drop-down Dashboard. Dasbor menampilkan data metrik YARN dari kluster. Anda dapat memilih rentang waktu untuk melihat pemanfaatan sumber daya kluster selama periode tertentu.
Lihat metrik Yarn Scaling di dasbor. Yarn Scaling adalah metrik yang digunakan untuk menunjukkan penskalaan otomatis YARN. Metrik ini membantu Anda mendapatkan wawasan tentang pemanfaatan sumber daya kontainer dan node yang berjalan di kluster, serta memahami efek penskalaan otomatis kluster secara lebih baik. Ini memungkinkan Anda mengevaluasi efektivitas penskalaan otomatis kluster secara akurat.