Simple Log Service:E-MapReduce Logs

Detail Aset

• Proyek kustom dan penyimpanan log khusus

  Saat Anda membuat proyek kustom, sistem secara otomatis membuat Logstore spesifikasi khusus bernama emr_nama layanan EMR_log dalam proyek tersebut. Misalnya, jika Anda mengirimkan log dari layanan host, nama Logstore-nya adalah emr_host_log.

  Penting

  • Jangan hapus proyek atau Logstore Simple Log Service terkait sebelum menonaktifkan fitur log. Jika tidak, log yang tersimpan akan di-purge dan log baru tidak dapat dikirimkan ke Simple Log Service.

  • Jika Anda mengaktifkan mode penagihan pay-by-ingested-data, sistem akan membuat Logstore spesifikasi khusus yang secara default menggunakan mode ini. Untuk beralih ke mode pay-by-feature, Anda dapat memodifikasi konfigurasi Logstore. Untuk informasi selengkapnya, lihat Modifikasi konfigurasi Logstore.

• Dasbor spesifikasi khusus

  Tidak tersedia dasbor spesifikasi khusus. Anda dapat membuat dasbor kustom untuk menampilkan hasil kueri. Untuk informasi selengkapnya, lihat Buat dasbor.

Penagihan

• Saat ini, EMR tidak membebankan biaya untuk fitur manajemen log.

• Jika Logstore menggunakan mode penagihan pay-by-feature, Simple Log Service membebankan biaya untuk penyimpanan log, lalu lintas baca, permintaan, transformasi data, dan pengiriman data. Untuk informasi selengkapnya, lihat Item yang dikenai biaya pada mode pay-by-feature.

• Jika Logstore menggunakan mode penagihan pay-by-ingested-data, Simple Log Service membebankan biaya berdasarkan jumlah data mentah yang diingest. Untuk informasi selengkapnya, lihat Item yang dikenai biaya pada mode pay-by-ingested-data.

Batasan

• Fitur manajemen log hanya tersedia untuk kluster dalam skenario DataLake, DataFlow, Pemrosesan Analitik Online (OLAP), DataServing, dan Hadoop yang baru.

• Pengiriman log didukung untuk layanan berikut: HDFS, YARN, yarn_application, Hive, Spark, JindoData, Tez, Flink, HBase, ZooKeeper, Kafka, Presto, Kudu, Impala, Flume, StarRocks, ClickHouse, Kyuubi, Remote Shuffle Service (RSS), dan host.

Aktifkan pengiriman log

1. Buka halaman Manajemen Log.

   1. Login ke Konsol E-MapReduce.

   2. Di bilah navigasi atas, pilih wilayah dan kelompok sumber daya sesuai kebutuhan.

   3. Di halaman EMR on ECS, klik Cluster ID kluster target.

   4. Klik tab Logs.

2. Konfigurasikan cakupan pengiriman log.

   1. Di halaman Logs, klik Set Log Shipping Scope di pojok kanan atas.

   2. Pada kotak dialog yang muncul, konfigurasikan Project untuk penyimpanan log.

      Anda dapat memilih Project yang sudah ada atau membuat yang baru.

      Penting

      Anda tidak dapat mengubah Project setelah dipilih.

   3. Pilih layanan yang log-nya ingin Anda kirimkan, lalu klik OK.

3. Lihat log layanan.

   1. Dari daftar drop-down Please select EMR service, pilih layanan yang log-nya ingin Anda lihat.

   2. Analisis log di halaman log.

      Anda dapat menentukan rentang waktu dan pernyataan kueri untuk melakukan kueri waktu nyata. Misalnya, Anda dapat menganalisis distribusi bidang tertentu selama periode tertentu atau memfilter dan mengagregasi catatan akses berdasarkan kondisi yang ditentukan.

Operasi terkait

Langkah selanjutnya

Setelah Anda mengirimkan log EMR ke Simple Log Service, Anda dapat melakukan kueri dan analisis log, mengunduh data, mengirimkan dan mentransformasi data, serta mengonfigurasi alert. Untuk informasi selengkapnya, lihat Operasi umum untuk log layanan cloud.