MaxCompute:Pengamatan resource

Lihat penggunaan resource komputasi

1. Masuk ke Konsol MaxCompute. Di pojok kiri atas, pilih wilayah.

2. Di panel navigasi sebelah kiri, klik Resource Observation.

3. Pada halaman Resource Observation, klik tab Computing Resources.

4. Pilih nama kuota tingkat-1, rentang waktu, dan interval waktu. Interval waktu adalah jumlah menit antar titik data. Opsi: Adaptive, 1, 5, atau 15 menit. Jika rentang waktu melebihi 72 jam, hanya opsi Adaptive yang tersedia.

5. Klik ikon perluas di sebelah kiri kuota tingkat-2 untuk melihat grafik tren konsumsi resource-nya. Anda dapat memperluas beberapa grafik kuota tingkat-2 secara bersamaan.

6. Lihat daftar proyek yang terkait dengan setiap kuota tingkat-2.

Metrik resource komputasi

Lihat penggunaan resource penyimpanan

1. Masuk ke Konsol MaxCompute. Di bilah navigasi atas, pilih wilayah.

2. Di panel navigasi sebelah kiri, klik Resource Observation.

3. Di halaman Resource Observation, klik tab Storage Resource untuk melihat total penggunaan penyimpanan dan distribusi penggunaan penyimpanan berdasarkan jenis penyimpanan pada hari ini.

4. (Opsional) Pilih rentang waktu dan satu atau beberapa proyek untuk melihat Storage Trend. Secara default, 7d (7 hari) dipilih sebagai rentang waktu, dan semua proyek dipilih. Anda dapat memilih hingga 8 proyek secara manual.

5. (Opsional) Di tab Project Details pada bagian Storage Details, pilih tanggal untuk melihat penggunaan penyimpanan tiap proyek pada tanggal tersebut. Tanggal default adalah hari ini.

6. (Opsional) Di tab Table/Partition Details pada bagian Storage Details, pilih tanggal dan proyek untuk melihat penggunaan penyimpanan tabel dan partisi dalam proyek tersebut pada tanggal tersebut. Tanggal default adalah hari ini.

Metrik resource penyimpanan

Lihat metrik transmisi data

1. Masuk ke Konsol MaxCompute, lalu pilih wilayah di bilah navigasi atas.

2. Di panel navigasi sebelah kiri, klik Resource Observation.

3. Di halaman Resource Observation, klik tab Data Transmission Service.

4. Pilih kuota, proyek, rentang waktu, dan algoritma agregasi untuk mengkueri data metrik.

Agregasi data

Mekanisme interval adaptif secara otomatis menyesuaikan kerapatan titik data berdasarkan rentang waktu yang dipilih:

Dua algoritma agregasi tersedia:

Saat interval melebihi granularitas asli (1 menit), sistem melakukan pra-pemrosesan data menggunakan algoritma agregasi yang dipilih. Rentang waktu yang lebih panjang menghasilkan perbedaan yang lebih besar antara hasil Average Value dan Maximum Value. Hal ini merupakan perilaku yang diharapkan.

Kondisi filter dan batasan

• Satu kueri mendukung rentang waktu maksimum 7 hari. Rentang waktu yang lebih pendek menghasilkan data pemantauan yang lebih akurat.

• Pilih minimal satu kuota atau satu proyek. Filter gabungan untuk kuota dan proyek juga didukung.

  • Hanya dimensi kuota: Tentukan kelompok sumber daya eksklusif atau kelompok sumber daya bersama. Karena kelompok sumber daya bersama merupakan kuota tingkat proyek, melihat kelompok sumber daya bersama untuk proyek tertentu juga memerlukan penentuan proyek tersebut.

  • Hanya dimensi proyek: Biarkan bidang Select Quota kosong dan pilih proyek yang diinginkan untuk Choose Project. Ini akan menampilkan total penggunaan untuk proyek tersebut.

• Setelah mengubah kondisi filter, klik Query untuk memperbarui data pemantauan.

• Untuk dasbor pemantauan tingkat tabel, pilih proyek terlebih dahulu sebelum melihat data atau memfilter berdasarkan nama tabel.

Metrik transmisi data

Lihat metrik performa job

1. Masuk ke Konsol MaxCompute, lalu pilih wilayah di bilah navigasi atas.

2. Di panel navigasi sebelah kiri, klik Resource Observation.

3. Di halaman Resource Observation, klik tab Job Performance Observation.

4. Konfigurasikan parameter filter dan pengelompokan berikut, lalu klik Search untuk melihat statistik.

Parameter filter

Nilai Job Type:

Nilai Job End Status: Success, Failed, Canceled.

Rangkuman dan perbandingan data

1. (Opsional) Pilih Data Summary untuk melihat statistik dengan granularitas waktu yang berbeda.

1. (Opsional) Pilih Comparison Period untuk membandingkan data saat ini dengan garis dasar historis.

Default: No Comparison. Opsi lain: Previous 30 Days, Previous 7 Days, Previous 1 Day. Misalnya, jika waktu saat ini adalah pukul 14.00 pada 6 Mei 2024, dan Anda memilih Previous 30 Days, data dari pukul 14.00 pada 6 April 2024 akan ditampilkan bersama data saat ini untuk perbandingan.

Metrik performa job

Kueri metrik dengan Information Schema

Gunakan Information Schema tingkat penyewa untuk mengumpulkan statistik yang sama secara terprogram.

Tabel Information Schema task_history berisi instans tugas yang dihasilkan oleh semua operasi. Tab Job Performance Observation hanya menampilkan data dari job yang mengonsumsi resource komputasi. Akibatnya, statistik dari Information Schema mungkin berbeda dari yang ditampilkan di konsol.

Contoh SQL berikut mengkueri metrik job dengan granularitas per jam untuk 7 hari sebelumnya:

SET odps.namespace.schema=TRUE;
SELECT to_char (end_time, 'yyyy-mm-dd hh'), -- Jam saat job selesai.
       -- to_char (end_time, 'yyyy-mm-dd'), -- Tanggal saat job selesai. Jika menggunakan granularitas harian, ganti baris di atas dengan baris ini.
       sum(cast(cost_cpu/100/3600 as DECIMAL(18,5) )) cost_cpuh, -- CPU-hour.
       sum(cast(cost_mem/1024/3600 as DECIMAL(18,5) )) cost_memh, -- memory-hour.
       avg(datediff(end_time, start_time, 'ss')), -- Durasi rata-rata waktu proses job.
       min(datediff(end_time, start_time, 'ss')), -- Durasi minimum waktu proses job.
       max(datediff(end_time, start_time, 'ss'))  -- Durasi maksimum waktu proses job.
       -- status, -- Dasar pengelompokan: status: status job; project: task_catalog; job type: task_type.
FROM SYSTEM_CATALOG.INFORMATION_SCHEMA.tasks_history
WHERE ds>=to_char(date_add(getdate(),-7),'yyyymmdd')  -- Anda dapat menambahkan kondisi filter lain sesuai kebutuhan bisnis.
and task_type in ('SQL','SQLRT','LOT','CUPID','ALgoTask')
GROUP BY to_char (end_time, 'yyyy-mm-dd hh')
         -- to_char (end_time, 'yyyy-mm-dd'), -- Tanggal saat job selesai. Jika menggunakan granularitas harian, ganti baris di atas dengan baris ini.
         -- status, -- Dasar pengelompokan: status: status job; project: task_catalog; job type: task_type.
order BY to_char (end_time, 'yyyy-mm-dd hh') ASC;
         -- to_char (end_time, 'yyyy-mm-dd'); -- Tanggal saat job selesai. Jika menggunakan granularitas harian, ganti baris di atas dengan baris ini.

Pemecahan masalah

Proyek atau kuota tidak ditampilkan dalam grafik yang dikelompokkan

Tidak ada job yang selesai di proyek atau kuota tersebut selama rentang waktu yang dipilih.

Data periode perbandingan tidak tersedia

Proyek atau kuota belum ada selama periode perbandingan, atau tidak ada job yang dijalankan di proyek atau kuota tersebut selama periode tersebut.