Aktifkan Analisis SQL dan Kueri Data Cepat - MaxCompute - Alibaba Cloud - MaxCompute

Konsol MaxCompute menyediakan fitur SQL Analysis untuk menjalankan pernyataan SQL dan mengelola katalog data MaxCompute. Topik ini menjelaskan cara menggunakan fitur SQL Analysis untuk mengakses MaxCompute.

Analisis SQL baru

Untuk mengikuti perkembangan teknologi cloud-native dan memenuhi permintaan yang terus meningkat akan analitik data kompleks, fitur SQL Analysis di Konsol MaxCompute Alibaba Cloud telah ditingkatkan secara menyeluruh. Fitur ini terintegrasi erat dengan fitur analisis data baru dari DataWorks guna memberikan pengalaman analisis data dan manajemen metadata yang lebih efisien, cerdas, serta terpadu. Analisis SQL baru mendukung fitur-fitur berikut:

Editor SQL cerdas: Edit dan jalankan perintah SQL, coba fitur produk, serta kembangkan dan debug kode SQL harian Anda.
Katalog data: Kelola metadata untuk berbagai objek MaxCompute, termasuk proyek, skema, tabel, dan tampilan (views).
Dataset publik: Jelajahi dataset publik bawaan MaxCompute dan skrip demo SQL. Anda dapat membuka file SQL terkait dan menjalankan kodenya untuk langsung mencoba MaxCompute.

Aktifkan analisis SQL baru

Prasyarat

Analisis SQL baru tersedia di wilayah-wilayah berikut: Tiongkok (Hangzhou), Tiongkok (Shanghai), Tiongkok (Beijing), Tiongkok (Shenzhen), Tiongkok (Zhangjiakou), Tiongkok (Ulanqab), Tiongkok (Chengdu), Tiongkok (Hong Kong), Singapura, Malaysia (Kuala Lumpur), Indonesia (Jakarta), Jepang (Tokyo), Jerman (Frankfurt), AS (Silicon Valley), AS (Virginia), Inggris (London), dan UEA (Dubai).
Anda telah mengaktifkan MaxCompute dan DataWorks.
Anda telah mengaktifkan kelompok sumber daya DataWorks.
Anda telah membuat proyek MaxCompute.

Prosedur

Masuk ke Konsol MaxCompute dan pilih wilayah di pojok kiri atas.
Pada panel navigasi kiri, pilih Data Exploration > SQL Analysis.
Pada kotak dialog yang muncul, aktifkan DataWorks. Jika DataWorks belum diaktifkan, klik Activate Now saat diminta. Setelah DataWorks diaktifkan, klik Try New Version untuk membuka halaman SQL Analysis baru.
- Untuk menggunakan analisis SQL baru, Anda harus mengaktifkan DataWorks dan kelompok sumber daya DataWorks. Untuk informasi lebih lanjut tentang edisi DataWorks, lihat Fitur edisi DataWorks.
  - Pastikan Anda telah mengaktifkan DataWorks Edisi Dasar bayar sesuai penggunaan (gratis) atau edisi yang lebih tinggi.
  - Pastikan Anda telah mengaktifkan kelompok sumber daya DataWorks. Jika Anda membeli kelompok sumber daya legacy, buka console. Untuk informasi selengkapnya tentang perbedaan antara kelompok sumber daya baru dan legacy, lihat Kelompok sumber daya DataWorks.
- Perhatikan perubahan dalam pengelolaan file SQL: Analisis SQL baru menyediakan folder pribadi untuk membuat dan mengelola direktori serta file SQL di cloud. File lokal dari ruang kerja lama tidak disinkronkan secara otomatis ke folder pribadi. Kami menyarankan agar Anda memindahkannya secara manual ke folder pribadi untuk pengeditan di masa mendatang.

Fitur

Analisis SQL baru mencakup modul-modul utama berikut:

Resource manager: Mengelola file skrip SQL MaxCompute. Untuk informasi lebih lanjut, lihat Gunakan resource manager dan fitur pencarian.
Katalog data: Mengelola dan mengoperasikan metadata MaxCompute. Untuk informasi lebih lanjut, lihat Gunakan katalog data.
Editor SQL: Mengedit dan menjalankan skrip SQL MaxCompute. Untuk informasi lebih lanjut, lihat Gunakan editor untuk analisis SQL.

Resource manager dan pencarian

Analisis SQL baru menyediakan resource manager dan fitur pencarian.

Resource manager: Mengelola file skrip analisis SQL dan menyediakan beberapa direktori sumber daya.
Pencarian dan penggantian: Mendukung pencarian global di seluruh konten semua file dalam resource manager dan memungkinkan Anda mengganti kata kunci dengan pernyataan lain.

Jenis direktori	Deskripsi
Folder pribadi (disarankan)	Buka resource manager > personal folder. Modul folder pribadi berfungsi sebagai daftar file untuk membuat dan mengelola skrip SQL yang disimpan di cloud. Di direktori personal folder > My Files, Anda dapat membuat folder atau file sesuai kebutuhan. Klik kanan item untuk memindahkan, mengganti nama, atau menghapusnya. Hanya file SQL dengan ekstensi `.sql` yang didukung. Setelah file dibuat, Anda dapat mengklik nama file tersebut untuk membuka editor dan mengedit skrip SQL.
Workspace	Buka resource manager > Workspace. Untuk pengguna yang pernah menggunakan versi sebelumnya dari analisis SQL, resource manager secara default mempertahankan direktori workspace asli dan file skrip SQL. Untuk pengguna yang belum pernah menggunakan workspace pada versi sebelumnya dari analisis SQL, modul ini disembunyikan secara default. Kami menyarankan agar Anda menggunakan folder pribadi yang baru. Modul workspace berfungsi sebagai daftar file untuk mengelola skrip SQL dari direktori lokal. Anda dapat membuka folder lokal atau file `.sql` lokal, serta menyimpan file `.sql` baru atau yang telah diedit kembali ke mesin lokal Anda. Catatan Untuk memastikan keamanan data, Anda harus memberikan akses secara manual ke semua file dalam folder tertentu setiap kali halaman mencoba membaca folder lokal. Alibaba Cloud tidak menyimpan konten folder lokal di servernya.
Demo dataset publik	Buka resource manager > public dataset demo. Ini adalah file kueri demo dataset publik bawaan yang dapat Anda buka dan jalankan langsung. Anda juga dapat melakukan edit sementara dan menjalankannya, tetapi perubahan tersebut tidak dapat disimpan. Anda harus menyimpan konten yang dimodifikasi secara manual. Setiap file berisi beberapa skrip SQL. Angka sebelum `-query` dalam nama skrip menunjukkan jumlah kueri. Secara khusus, demo dataset TPC-DS berisi 99 kueri per file, dengan spesifikasi volume data berbeda. Menjalankan kueri ini mengonsumsi sumber daya komputasi. Lakukan dengan hati-hati.

Katalog data

Analisis SQL baru mencakup modul katalog data yang menyediakan antarmuka terpadu untuk mengelola metadata MaxCompute. Fitur ini mendukung pembuatan dan pengelolaan objek data seperti tabel, tampilan (views), tabel eksternal, sumber daya, dan fungsi. Fitur ini mendukung fitur-fitur utama berikut:

Fitur	Deskripsi
Tambah dan hapus proyek	Buka Data Catalog > MAXCOMPUTE. Secara default, semua proyek MaxCompute yang dapat diakses oleh penyewa saat ini ditambahkan ke daftar katalog data sebagai set data. Anda dapat mengklik untuk membuka halaman daftar proyek guna membuat atau menghapus proyek MaxCompute.
Kelola katalog data	Buka Data Catalog > MAXCOMPUTE. Klik ikon di samping proyek MaxCompute tertentu untuk menambah dan mengelola objek data seperti skema, tabel, dan tampilan di katalog data. Terintegrasi dengan DataWorks Copilot, fitur ini mendukung pembuatan tabel cerdas dan pembuatan bidang beserta deskripsinya secara otomatis. Untuk petunjuk lebih rinci, lihat Kelola katalog data MaxCompute.
Dataset publik	Buka Data Catalog > public datasets. MaxCompute menyediakan serangkaian data publik yang disimpan di proyek publik `BIGDATA_PUBLIC_DATASET` untuk membantu Anda mencoba produk ini. Untuk informasi lebih lanjut, lihat Ikhtisar dataset publik. Fitur ini menampilkan semua skema dan tabel dalam proyek publik `BIGDATA_PUBLIC_DATASET` dan memungkinkan Anda melihat daftar tabel beserta detail bidangnya.

Editor SQL

Analisis SQL baru menyediakan editor canggih yang memungkinkan Anda menulis skrip SQL untuk memproses dan mengkueri data di MaxCompute. Editor ini mendukung operasi SQL umum seperti SELECT, INSERT, UPDATE, dan DELETE, serta sintaks dan fungsi khusus MaxCompute. Untuk informasi lebih lanjut, lihat Ikhtisar SQL.

Halaman editor mencakup fitur-fitur berikut:

Area	Deskripsi
Area editor	Run: Menjalankan skrip SQL. Anda dapat memilih segmen skrip SQL dalam file saat ini untuk dijalankan. Jika tidak ada pilihan, semua skrip SQL dalam file saat ini akan dijalankan secara default. Stop: Menghentikan node yang sedang berjalan. Setelah Anda mengklik Run, Anda dapat mengklik tombol Stop. Save: Menyimpan file skrip SQL yang sedang diedit beserta konfigurasi terkaitnya. Format: Memformat kode SQL dalam file saat ini. Fitur ini berguna untuk kode panjang yang ditulis dalam satu baris. SQL Scan Estimate: Menjalankan pernyataan COST SQL untuk memperkirakan biaya. Fitur ini mengembalikan ukuran pemindaian dan kompleksitas pernyataan SQL. Untuk penjelasan rinci tentang COST SQL, lihat COST SQL. Editor: Kotak pengeditan kode SQL. Mendukung mode layar penuh untuk memasukkan, mengeksekusi, dan melihat hasil. Jika file berisi beberapa skrip SQL, letakkan semua flag (pernyataan SET) di awal. Flag tersebut berlaku untuk semua skrip SQL dalam file.
Parameter waktu proses	Type: Jenis file. Default-nya adalah MaxCompute SQL. Sumber daya komputasi: Project: Pilih proyek tempat kode SQL akan dijalankan. Ini wajib diisi. Pilih proyek tempat akun Anda memiliki izin `create instance`. Anda harus memilih proyek untuk eksekusi pertama. Sistem kemudian akan menyimpan pilihan Anda untuk eksekusi berikutnya. Computing quota: Pilih kuota komputasi yang akan digunakan. Ini opsional. Pilih kuota tempat akun Anda memiliki izin `usage`. Jika Anda tidak memilih kuota, kuota komputasi default dari proyek yang dipilih akan digunakan. Parameter skrip: Definisikan variabel dalam kode Anda menggunakan format ${parameter_name} dan konfigurasikan nilainya di bagian ini. Saat runtime, variabel tersebut akan diganti secara dinamis dengan nilai aktualnya.
Area hasil	Problems: Sebelum eksekusi, sistem secara otomatis memeriksa sintaks dan standar semua skrip yang terbuka di editor untuk mengidentifikasi potensi masalah kepatuhan. SQL Scan Estimate: Menampilkan log eksekusi dan hasil pernyataan COST SQL dari operasi SQL Scan Estimate. Result: Hasil eksekusi skrip. Detailnya sebagai berikut: Run List: Setiap kali skrip SQL dalam file saat ini dijalankan, catatan dengan Waktu mulai dibuat. Anda dapat mengklik catatan dalam daftar untuk melihat informasi tentang eksekusi tersebut. SQL: Kode SQL spesifik untuk setiap eksekusi. Log: Konten log untuk setiap eksekusi. Result: Hasil eksekusi ditampilkan langsung dalam format spreadsheet. Analysis: Mendukung analisis sederhana berbasis grafik.

Fitur pengeditan SQL pada analisis SQL baru didasarkan pada kemampuan analisis data baru dari DataWorks. Untuk informasi lebih lanjut tentang pengembangan node SQL MaxCompute, lihat Node SQL MaxCompute.

Perbandingan versi

Item	Analisis SQL (versi sebelumnya)	Analisis SQL (versi baru)
Ketergantungan produk	Aktifkan MaxCompute.	Aktifkan MaxCompute. Aktifkan DataWorks Edisi Dasar bayar sesuai penggunaan (gratis) atau edisi yang lebih tinggi. Aktifkan kelompok sumber daya DataWorks.
Resource manager	Menyediakan workspace untuk mengelola skrip SQL berdasarkan direktori file lokal.	Menyediakan folder pribadi untuk membuat dan mengelola direktori serta file SQL di cloud.
Katalog data	Mendukung melihat objek MaxCompute seperti tabel, tampilan, tabel eksternal, sumber daya, dan fungsi.	Mendukung membuat dan mengelola objek MaxCompute seperti tabel, tampilan, tabel eksternal, sumber daya, dan fungsi.
Editor SQL	Mendukung pengeditan dan eksekusi skrip SQL dasar.	Berdasarkan kemampuan analisis data baru dari DataWorks, editor ini memberikan pengalaman analisis SQL yang lebih cerdas.

Migrasi skrip SQL dari analisis SQL lama ke versi baru

Skrip SQL yang dimuat di analisis SQL lama disimpan di disk lokal Anda dan tidak disinkronkan ke cloud. Analisis SQL baru hanya mendukung skrip SQL yang disimpan di cloud. Anda harus memigrasikan skrip SQL Anda dari versi lama ke analisis SQL baru.

Langkah migrasi:

1. Buka skrip SQL yang akan dimigrasikan di analisis SQL lama atau dari file lokal Anda, lalu salin seluruh isinya.

2. Buka halaman analisis SQL baru dan buat skrip baru.

3. Tempel konten yang disalin ke editor dan klik Save.

Catatan

Tab file yang terbuka di analisis SQL lama akan muncul secara otomatis di analisis SQL baru. Namun, file-file tersebut tidak dapat dieksekusi dan tidak muncul di pohon direktori sisi kiri. Anda tetap perlu membuat skrip SQL baru mengikuti langkah-langkah di atas untuk menyelesaikan migrasi.