E-MapReduce：Menyesuaikan konfigurasi perangkat lunak

Konfigurasi saat pembuatan kluster

1. Masuk ke Konsol EMR. Di panel navigasi sebelah kiri, klik EMR on ECS.

2. Di bilah menu atas, pilih wilayah dan kelompok sumber daya.

3. Pada halaman EMR on ECS, klik Create Cluster.

4. Pada bagian Advanced Settings di langkah Software Configuration, aktifkan sakelar Custom Software Configuration.

   Anda dapat menambahkan berkas konfigurasi JSON untuk menimpa atau menambahkan parameter layanan selama pembuatan kluster. Kode berikut menunjukkan contoh berkas JSON.

   [
       {
           "ApplicationName":"YARN",
           "ConfigFileName":"yarn-site.xml",
           "ConfigItemKey":"yarn.nodemanager.resource.cpu-vcores",
           "ConfigItemValue":"8"
       },
       {
           "ApplicationName":"YARN",
           "ConfigFileName":"yarn-site.xml",
           "ConfigItemKey":"aaa",
           "ConfigItemValue":"bbb"
       }
   ]

   • Tabel berikut menjelaskan parameter tersebut.

     Parameter	Deskripsi
     ApplicationName	Nama layanan. Nama harus ditulis dalam huruf kapital semua.
     ConfigFileName	Nama berkas konfigurasi yang akan diteruskan. Catatan Untuk menerapkan berkas konfigurasi dengan benar, perhatikan detail penamaan berkas. Untuk kluster skenario DataLake, DataFlow, OLAP, DataServing, atau Custom, nama berkas harus menyertakan ekstensi. Contoh: yarn-site.xml. Untuk kluster data lake lama (Hadoop), nama berkas tidak memerlukan ekstensi. Contoh: yarn-site.
     ConfigItemKey	Nama item konfigurasi.
     ConfigItemValue	Nilai yang akan diatur untuk item konfigurasi.

   • Tabel berikut mencantumkan berkas konfigurasi untuk setiap layanan.

     Layanan	Berkas konfigurasi
     YARN	core-site.xml log4j.properties hdfs-site.xml mapred-site.xml yarn-site.xml httpsfs-site.xml capacity-scheduler.xml hadoop-env.sh httpfs-env.sh mapred-env.sh yarn-env.sh
     Hive	hive-env.sh hive-site.xml hive-exec-log4j.properties hive-log4j.properties

   Setelah mengonfigurasi parameter untuk komponen kluster, Anda dapat melanjutkan pembuatan kluster. Untuk informasi selengkapnya, lihat Create a cluster.

Konfigurasi saat menambahkan kelompok node

Anda dapat memperluas kluster yang sedang Berjalan dengan menambahkan kelompok node baru. Saat menambahkan kelompok node, Anda juga dapat menyesuaikan item konfigurasi layanan. Untuk informasi selengkapnya, lihat Manage node groups.

Referensi

Setelah kluster dibuat, Anda juga dapat menyesuaikan item konfigurasi pada halaman konfigurasi untuk setiap layanan. Untuk informasi selengkapnya, lihat Manage configuration items.