DataWorks Data Map adalah platform terpusat untuk manajemen dan penemuan aset data. Platform ini menyediakan tampilan komprehensif mengenai lanskap data perusahaan Anda dan memungkinkan Anda menemukan data yang dibutuhkan secara cepat dan akurat. Fitur utamanya meliputi:
Data Overview: Menyediakan statistik mengenai aset data Anda untuk gambaran cepat mengenai status terkininya.
Global keyword search: Memungkinkan Anda menemukan tabel, bidang, atau istilah bisnis yang diminati dari satu titik masuk.
Multi-dimensional filtering and browsing: Memungkinkan penemuan data yang lebih terarah dan eksploratif dengan menggabungkan berbagai kondisi.
Limits
Penyewa dengan ruang kerja PAI yang sudah ada dapat mencari dan melihat aset AI terkait, seperti set data, model AI, tugas algoritma, dan layanan model.
Pencarian kode hanya tersedia bagi pengguna DataWorks Edisi Standar atau versi yang lebih baru.
Akses peta data
Masuk ke Konsol DataWorks. Di wilayah target, klik di panel navigasi sebelah kiri. Pada halaman yang muncul, klik Go to Data Map.
Data overview: Dapatkan wawasan tingkat makro
Halaman Data Overview menyediakan ringkasan tingkat tinggi mengenai cara sumber data Anda digunakan.
Pada Homepage Data Map, klik Data Overview di samping Metadata Collection.
Pada halaman Data Overview, lihat semua resource engine di wilayah saat ini.
Metrik utama MaxCompute:
Name
Description
Total Number of Projects
Jumlah total proyek MaxCompute di wilayah saat ini. Ini adalah data near-real-time.
Total Tables
Jumlah total tabel MaxCompute di wilayah saat ini. Data ini dikumpulkan secara offline dan memiliki penundaan T+1.
Storage
Total ukuran penyimpanan logis semua tabel di wilayah saat ini, termasuk file temporary yang dihasilkan oleh tugas penjadwalan dan penyimpanan yang belum dilepas setelah tabel dihapus. Data ini dikumpulkan secara offline dan memiliki penundaan T+1.
Total APIs
Jumlah total API MaxCompute yang telah dipublikasikan ke API Gateway di wilayah saat ini.
Storage Trend Chart
Grafik tren total penyimpanan logis proyek MaxCompute di wilayah saat ini. Data ini mencakup file temporary yang dihasilkan oleh tugas penjadwalan dan penyimpanan yang belum dilepas setelah tabel dihapus. Data ini dikumpulkan secara offline dan memiliki penundaan T+1.
Top Projects by Storage
Peringkat proyek MaxCompute berdasarkan ukuran penyimpanan logis di wilayah saat ini. Data ini dikumpulkan secara offline dan memiliki penundaan T+1. Anda dapat mengklik proyek untuk melihat metadatanya.
PentingSelain penyimpanan tabel, penyimpanan proyek juga mencakup penyimpanan resource, penyimpanan Keranjang daur ulang, dan penyimpanan file sistem lainnya. Oleh karena itu, penyimpanan proyek lebih besar daripada penyimpanan tabel.
Top Tables by Storage
Peringkat tabel MaxCompute berdasarkan ukuran. Data ini dikumpulkan secara offline dan memiliki penundaan T+1. Anda dapat mengklik tabel untuk melihat metadatanya.
PentingPenyimpanan tabel dihitung berdasarkan penyimpanan logis, bukan penyimpanan fisik.
Most Frequently Viewed Tables
Tabel yang paling sering dilihat dalam 30 hari terakhir, diurutkan berdasarkan PV (page views) halaman detail tabel di Data Map. Ini adalah data near-real-time.
Metrik engine lainnya: Menampilkan informasi seperti jumlah total database, jumlah total tabel, dan jumlah total kluster.
Cara menemukan data: Dari pencarian hingga penemuan
Data Map menyediakan dua metode pencarian komplementer untuk memenuhi berbagai kebutuhan penemuan data Anda.
Global keyword search
Saat Anda memiliki petunjuk yang jelas mengenai data yang dicari, pencarian global adalah metode paling efisien. Halaman utama juga menyediakan akses cepat ke Recent Views, Followed Collections, dan Managed Collections.
Buka bilah pencarian: Di bagian atas homepage Data Map, temukan kotak pencarian yang mencolok.
Masukkan kata kunci: Pilih jenis metadata dan masukkan nama tabel, nama bidang, komentar dalam bahasa Tionghoa, atau Keyword lainnya. Misalnya, masukkan "user", "order", atau "user_info".
Jalankan pencarian: Tekan Enter. Sistem akan menampilkan daftar semua aset data terkait. Klik item untuk melihat detailnya.
Multi-dimensional filtering and browsing
Saat Anda perlu mempersempit hasil secara lebih tepat atau menjelajahi data berdasarkan kategori bisnis, buka halaman pencarian untuk pencarian lanjutan. Bilah pencarian global keyword tetap tersedia di bagian atas bilah navigasi.
Buka halaman pencarian: Klik ikon pencarian
di panel navigasi sebelah kiri untuk membuka halaman pencarian lanjutan.Gabungkan kondisi filter: Di sisi kiri halaman, pilih berbagai kondisi filter untuk mempersempit hasil secara bertahap:
Type: Pilih jenis metadata. Jenis yang didukung meliputi Table, Code, Index, API, Dataset, Workspace, dan lainnya. Jika penyewa Anda memiliki ruang kerja PAI, Anda juga dapat memfilter berdasarkan jenis aset AI seperti AI Model, Algorithm Task, dan Model Service (saat ini dalam versi beta).
Data source: Saat Anda memilih tabel, Anda dapat membatasi pencarian ke engine tertentu, seperti MaxCompute, EMR Hive, atau Hologres.
PentingJika jumlah sumber data melebihi ambang batas tertentu, klik tombol More di pojok kanan atas untuk menampilkan sumber data yang disembunyikan.
Filter conditions: Anda dapat memfilter berdasarkan proyek, pemilik, lingkungan, kluster, katalog data, database, dan lainnya.
Kondisi filter yang tersedia bervariasi tergantung pada jenis metadata.
CatatanSelain atribut dasar, objek tabel dapat difilter berdasarkan tag dan kategori, sedangkan ruang kerja dan set data mendukung pemfilteran berdasarkan atribut kustom.
Tags: Anda dapat memfilter berdasarkan tag yang diterapkan selama tata kelola data. Untuk informasi lebih lanjut, lihat Tags.
Category: Anda dapat memfilter berdasarkan kategori bisnis. Untuk informasi lebih lanjut, lihat Manage categories.
Custom attributes: Anda dapat memfilter berdasarkan atribut kustom bertipe enumerasi. Untuk informasi lebih lanjut, lihat Custom attributes.
Contoh penggunaan:
Saya ingin menemukan semua tabel produksi di MaxCompute yang dimiliki oleh "Zhang San". Langkah-langkah: PilihMaxComputedi "Data source" → MasukkanZhang Sandi "Owner" → PilihProductiondi "Environment".
AI Search
Saat Anda kesulitan menggambarkan data yang dicari dengan satu kata kunci, atau saat Anda ingin mendapatkan rekomendasi berdasarkan skenario bisnis, Anda dapat menggunakan AI Search untuk mengajukan pertanyaan dalam bahasa alami. Data Map secara cerdas menemukan aset, merekomendasikan tabel terkait, dan menjelaskan alasan di balik rekomendasinya.
Akses dari halaman pencarian: Di pojok kanan atas halaman pencarian Data Map, beralihlah ke tab AI Search untuk memasuki pengalaman pencarian percakapan.
Akses dari halaman utama: Di kotak pencarian pada homepage Data Map, beralihlah ke mode AI Q&A, masukkan pertanyaan Anda, dan sistem akan mengarahkan Anda ke halaman percakapan pencarian AI untuk melanjutkan dialog.
Cara menggunakan: Jelaskan kebutuhan Anda dalam bahasa alami di kotak input. Contohnya:
Temukan tabel fakta yang terkait dengan bisnis transaksi; Kueri set data yang ditambahkan dalam 7 hari terakhir; Daftar proyek MaxCompute yang termasuk dalam departemen bisnis "Data Governance".
Manajemen sesi: Pertanyaan yang diajukan dari halaman utama membuat sesi baru. Saat Anda memasuki halaman pencarian AI tanpa menentukan sesi, sesi terbaru Anda dilanjutkan. Anda dapat membuat sesi baru atau kembali ke sesi historis sesuai kebutuhan.
Templat pertanyaan cepat: Bagian bawah halaman percakapan pencarian AI menyediakan templat pertanyaan yang umum digunakan. Klik templat untuk mengirimnya, sehingga membantu Anda memulai dengan cepat.
Hubungan dengan pencarian komprehensif: Pencarian komprehensif mencocokkan metadata secara tepat berdasarkan kata kunci dan kondisi filter, sedangkan pencarian AI memahami kebutuhan Anda melalui bahasa alami dan konteks semantik serta memberikan rekomendasi. Kedua pendekatan ini saling melengkapi. Gunakan pencarian komprehensif saat Anda memiliki objek target yang jelas, dan gunakan pencarian AI saat Anda ingin menggambarkan kebutuhan bisnis.
Pencarian AI saat ini tersedia secara bertahap berdasarkan penyewa. Fitur ini hanya terlihat jika penyewa Anda telah mengaktifkan kemampuan ini. Untuk mengaktifkannya, hubungi administrator Anda atau kirimkan tiket.
FAQ
Q: Tidak dapat menemukan tabel yang saya cari?
A: Jika Anda tidak dapat menemukan tabel target di DataWorks Data Map, masalah ini biasanya disebabkan oleh alasan berikut. Anda dapat memecahkan masalah satu per satu dan merujuk ke solusi yang sesuai.
Ketidaksesuaian kata kunci pencarian: Pencarian mendukung pengambilan berdasarkan nama tabel, deskripsi, dan nama bidang. Coba gunakan kata kunci yang lebih tepat atau sebagian.
Metadata belum disinkronkan: Setelah Anda menghubungkan MaxCompute atau DLF ke DataWorks, metadata dikumpulkan secara otomatis. Namun, mungkin terjadi penundaan setelah tabel baru dibuat atau struktur tabel diubah. Untuk memicu sinkronisasi secara manual, lakukan langkah-langkah berikut:
Buka My Data > Refresh Table Metadata, masukkan GUID tabel target ke dalam kotak input GUID dengan format
project.tableatauodps.project.table, lalu klik Sync.
Setelah operasi berhasil, lakukan pencarian ulang untuk menemukan tabel target.
Tabel disembunyikan: Tabel tersebut mungkin diatur ke status "Hidden", sehingga tidak dapat ditemukan melalui pencarian. Saat tabel diatur ke "Hidden", tabel tersebut tidak terlihat oleh siapa pun. Saat diatur ke "Project Only", tabel tersebut hanya terlihat oleh anggota ruang kerja saat ini.
Izin tidak mencukupi: Secara default, pencarian hanya mencakup ruang kerja saat ini dan proyek yang telah diotorisasi. Jika tabel target milik akun lain atau ruang kerja yang tidak diotorisasi, tabel tersebut tidak dapat ditemukan meskipun ada. Selain itu, jika Anda tidak memiliki izin kueri pada tabel tersebut, Anda tidak dapat melihatnya di Data Map secara default (terutama di ruang kerja mode standar).
Solusi: Hubungi pemilik tabel atau administrator untuk meminta izin, atau verifikasi apakah Anda telah bergabung dalam proyek yang sesuai.