MaxCompute：Tampilan materialisasi otomatis (AutoMV)

Pengenalan

Tabel tampilan materialisasi memiliki peran penting dalam optimasi perhitungan berulang di bidang data warehousing. Dalam skenario bisnis pengguna, banyak kueri sering kali menggunakan subquery umum yang memerlukan operasi intensif seperti JOIN dan AGGREGATE. Anda dapat menggunakan tampilan materialisasi untuk menyimpan hasil dari subquery tersebut dalam tabel. Saat subquery diperlukan kembali, tidak perlu melakukan perhitungan ulang karena hasilnya dapat langsung dibaca dari tabel.

Fitur AutoMV dari MaxCompute menyederhanakan analisis, pembuatan, dan pemeliharaan tampilan materialisasi.

Setelah diaktifkan, sistem akan secara otomatis:

1. Memantau Kueri Secara Terus-menerus: Memantau kueri yang dieksekusi di tingkat Proyek untuk mengidentifikasi subquery umum yang cocok untuk tampilan materialisasi.

2. Membuat Tampilan Materialisasi Secara Otomatis: Membuat tampilan materialisasi secara berkala berdasarkan subquery umum yang teridentifikasi.

3. Penulisan Ulang Kueri Cerdas: Menulis ulang kueri pekerjaan secara otomatis untuk membaca langsung dari tabel tampilan materialisasi yang dibuat secara otomatis.

4. Manajemen Sumber Daya Penyimpanan Adaptif: Mengelola sumber daya penyimpanan secara efisien melalui mekanisme pembersihan otomatis, mencegah peningkatan signifikan dalam penggunaan penyimpanan.

Batasan

• Wilayah yang didukung adalah China (Hangzhou), China (Shanghai), China (Beijing), China (Zhangjiakou), China (Shenzhen), dan China (Chengdu).

• Pembuatan AutoMV memerlukan subquery umum mencakup setidaknya salah satu operator berikut: Proyeksi, Filter, JOIN, atau Aggregate.

• AutoMV tidak mendukung penggunaan lintas-proyek. Jika dua proyek MaxCompute dapat menggunakan tampilan materialisasi yang sama, AutoMV akan membuat dua tampilan materialisasi terpisah dengan data identik untuk masing-masing proyek.

• AutoMV hanya mendukung kecocokan eksak. Untuk mencegah degradasi performa dari kueri lebih luas yang mengenai tampilan materialisasi, ia hanya akan mencocokkan pekerjaan dengan tampilan materialisasi yang memiliki data sepenuhnya setara.

Kelola saklar AutoMV dan atur batas sumber daya penyimpanan

Anda dapat mengelola saklar AutoMV dan mengatur batas sumber daya penyimpanan melalui Konsol MaxCompute atau perintah SQL. Jika batas yang diatur secara manual dilampaui, AutoMV akan berhenti menulis data ke tampilan materialisasi.

Lihat manfaat AutoMV dan penggunaan penyimpanan

Di tab AutoMV, Anda dapat melihat manfaat seperti waktu komputasi yang dihemat, jam-CU, volume, dan biaya, serta penggunaan penyimpanan setelah mengaktifkan fitur ini.

1. Masuk ke Konsol MaxCompute dan pilih wilayah di pojok kiri atas.

2. Di panel navigasi di sebelah kiri, pilih Intelligent Optimization > Intelligent Materialized Views.

3. Di halaman Intelligent Materialized Views, pilih tab AutoMV, pilih Proyek MaxCompute target (atau semua Proyek jika tidak dipilih), dan interval statistik manfaat untuk melihat manfaat, penggunaan penyimpanan, dan daftar AutoMV spesifik dari Proyek dengan AutoMV yang diaktifkan.

   • Parameter Indikator:

     Parameter	Deskripsi
     Hits	Jumlah panggilan AutoMV dalam interval statistik manfaat.
     Saved Computing Duration	Durasi komputasi yang dihemat dari semua pekerjaan yang mengenai AutoMV proyek terpilih dalam interval statistik manfaat dibandingkan dengan durasi komputasi sebelum pembuatan AutoMV.
     Saved CU-hours	Konsumsi Jam-CU yang dihemat dari semua pekerjaan yang mengenai AutoMV proyek terpilih dalam interval statistik manfaat dibandingkan dengan konsumsi Jam-CU sebelum pembuatan AutoMV.
     Reduced Computing Load	Volume komputasi yang dihemat (volume scan × kompleksitas) dari semua pekerjaan yang mengenai AutoMV proyek terpilih dalam interval statistik manfaat dibandingkan dengan volume komputasi (volume scan × kompleksitas) sebelum pembuatan AutoMV. Hanya pekerjaan yang berjalan pada sumber daya komputasi pay-as-you-go yang dihitung.
     Savings in Computing Costs (Catalog Price)	Volume komputasi yang dihemat dari semua pekerjaan yang mengenai AutoMV proyek terpilih dikalikan dengan USD 0.0438/GB (harga unit komputasi SQL Edisi Standar pay-as-you-go). Catatan Wilayah SAU (Riyadh - Partner Region) dioperasikan oleh mitra, dan harga unit adalah USD 0.05256/GB.
     Occupied Storage Space	Ukuran penyimpanan yang digunakan oleh AutoMV.

   • Parameter Daftar AutoMV:

     Nama Kolom	Deskripsi
     Materialized View Name	Nama AutoMV.
     Project	Proyek tempat AutoMV berada.
     Hits	Jumlah panggilan AutoMV dalam interval manfaat.
     Saved Computing Duration (s)	Durasi komputasi yang dihemat dari pekerjaan yang mengenai AutoMV ini dalam interval statistik manfaat dibandingkan dengan durasi komputasi sebelum pembuatan AutoMV.
     Saved CU-hours	Konsumsi Jam-CU yang dihemat dari pekerjaan yang mengenai AutoMV ini dalam interval statistik manfaat dibandingkan dengan konsumsi Jam-CU sebelum pembuatan AutoMV.
     Reduced Computing Load	Volume komputasi yang dihemat (volume scan × kompleksitas) dari pekerjaan yang mengenai AutoMV ini dalam interval statistik manfaat dibandingkan dengan volume komputasi (volume scan × kompleksitas) sebelum pembuatan AutoMV. Hanya pekerjaan yang berjalan pada sumber daya komputasi pay-as-you-go yang dihitung.
     Occupied Storage Space	Ukuran penyimpanan yang digunakan oleh AutoMV.
     Actions	Klik View Details untuk melihat informasi dasar dan detail kode AutoMV. Informasi Dasar Waktu Pembuatan: Waktu pembuatan AutoMV. Waktu Pembaruan Struktur Tabel: Waktu pembaruan struktur tabel AutoMV. Ukuran Penyimpanan: Ukuran penyimpanan yang digunakan oleh AutoMV. Detail Kode: Skrip SQL yang mendefinisikan AutoMV. Anda dapat melihat, menyalin, atau mengunduh skrip SQL.

Deskripsi Penagihan

Setelah mengaktifkan AutoMV untuk sebuah Proyek, pengguna hanya perlu membayar penyimpanan tampilan materialisasi yang dihasilkan secara otomatis oleh sistem, dengan biaya unit penyimpanan standar.

Referensi

• Operasi tampilan materialisasi.

• Kueri dan penulisan ulang untuk tampilan materialisasi.

• Rekomendasi dan pengelolaan tampilan materialisasi.