Lihat detail dan kelola tabel MaxCompute di Peta Data - DataWorks

Setelah membuat sumber data MaxCompute dan menyambungkannya ke Pengembangan Data DataWorks, Anda dapat langsung melakukan berbagai operasi pada tabel MaxCompute di Peta Data. Operasi tersebut mencakup pengambilan data, pratinjau data, peninjauan metadata, pelacakan alur data, pengelolaan tabel melalui klasifikasi dan pengelompokan, serta penggunaan Lensa EBS. Topik ini menjelaskan cara melihat dan mengelola tabel MaxCompute di Peta Data.

Prasyarat

Anda harus membuat sumber data MaxCompute dan menyambungkannya ke Pengembangan Data DataWorks. Setelah sumber data tersambung, DataWorks secara otomatis mengumpulkan metadata dari mesin. Sistem melakukan satu kali pengumpulan penuh terhadap metadata yang sudah ada, lalu setiap hari melakukan pengumpulan inkremental. Metadata yang dikumpulkan diagregasi di Peta Data. Sistem secara otomatis memelihara pengumpul metadata, sehingga Anda tidak perlu mengelolanya.

Di Peta Data, Anda dapat mencari tabel MaxCompute target menggunakan fitur pencarian metadata global.

Penting

Jika Anda tidak dapat menemukan tabel target di Peta Data, buka My Data > My Tools > Refresh Table Metadata untuk menyinkronkan metadata tabel secara manual.

Lihat detail tabel

Pada daftar hasil pencarian, klik nama tabel target untuk membuka halaman detail tabel.

Fitur		Deskripsi	Referensi
Tindakan cepat		Di bagian atas halaman, Anda dapat Request Permissions untuk tabel, menambahkan tabel ke Data Album atau View The Album, Favorite The Table, Generate An API di halaman DataService Studio, atau melakukan kueri dan analisis data dengan menulis pernyataan SQL di halaman SQL Query.	Meminta dan mengelola izin tabel Menambahkan tabel ke koleksi data Menghasilkan API Kueri SQL (Baru)
Informasi dasar tabel		Di area Basic Table Information, Anda dapat melihat Views, Reads, Favorites, Lifecycle , Approval Owner, Health Score, Table Owner, Table Type, dan informasi lainnya.	Melihat informasi dasar tabel
Informasi model tabel		Lihat informasi seperti lapisan gudang data, kategori bisnis, dan kebijakan penyimpanan dari tabel model saat ini. Klik View Model untuk membuka halaman Intelligent Data Modeling > Dimensional Modeling dan melihat tabel model yang telah dibuat. Di halaman pengeditan tabel, Anda dapat memodifikasi informasi tabel, menerbitkan tabel, melihat log operasi tabel, atau melakukan pengembangan data untuk model tabel. Catatan Hanya tabel yang dihasilkan oleh Pemodelan Data Cerdas DataWorks yang menampilkan informasi model.	Ikhtisar Pemodelan Dimensi
Informasi izin tabel		Bagian ini menampilkan izin tabel Anda saat ini, dan Anda dapat mengklik Click To View untuk membuka halaman Table Permission Request guna meminta izin.	Meminta dan mengelola izin tabel
Informasi teknis tabel		Digunakan untuk melihat Last DDL Modification Time, Last Data Modification Time, dan Last Access Time. Catatan Waktu terakhir dilihat: Ini adalah waktu terakhir tabel diakses. Akses mencakup menjalankan perintah secara manual untuk mengakses data tabel dan mengakses data tabel dalam skenario penjadwalan tugas. Data ini hanya sebagai referensi dan mungkin tidak mencerminkan waktu akses yang tepat. Data ini dikumpulkan secara offline dan memiliki keterlambatan T+1.	-
Detail		Lihat Field Information, Partition Information, dan Change History tabel.	Melihat detail
Informasi output		Jika data tabel berubah secara berkala dengan tugas terkait, Anda dapat mengklik Output Information untuk melihat informasi eksekusi tugas produksi untuk tabel tersebut. Data ini dikumpulkan secara offline dan memiliki keterlambatan T+1.	-
Lineage		Lihat lineage antar node dalam satu mesin atau antar mesin berbeda. Anda juga dapat melihat lineage antara mesin (sebagai sumber data) dan API data yang dihasilkan. Selain itu, MaxCompute mendukung melihat lineage lengkap berdasarkan sinkronisasi offline. Data ini dikumpulkan secara real time. Catatan Untuk melihat lineage end-to-end lengkap dari perspektif API, termasuk sumber data hulu dan aplikasi hilir, lihat Lihat detail API.	Melihat informasi lineage
Petunjuk		Anda dapat melakukan operasi seperti Edit, View History, dan View Markdown Syntax untuk memahami data berdasarkan deskripsi bisnisnya.	-
Kesehatan data	Tata kelola data	Menampilkan skor kesehatan tata kelola, tren masalah yang memerlukan tata kelola, dan masalah tata kelola spesifik untuk tabel saat ini. Jika tabel memiliki masalah yang memerlukan tata kelola, Anda dapat menyelesaikannya dengan cepat.	Melihat kesehatan data
	Data Quality	Menampilkan detail aturan pemantauan Kualitas Data yang dikonfigurasi untuk tabel saat ini dan daftar peringatan DQC. Anda dapat mengklik Configure Rules di sebelah kanan untuk membuka halaman Kualitas Data dan mengonfigurasi aturan pemantauan untuk tabel tersebut.	Mengonfigurasi aturan untuk satu tabel
Catatan penggunaan		Menampilkan catatan penggunaan tabel dari perspektif Asosiasi sering dan Statistik akses. Frequent Associations: Menunjukkan berapa banyak orang yang menggunakan data dalam tabel saat ini. Access Statistics: Menampilkan catatan penggunaan tabel melalui visualisasi seperti grafik tren bacaan, referensi bidang dalam klausa, dan pembaca teratas.	Melihat catatan penggunaan
Pratinjau data		Pratinjau 20 catatan data acak dari tabel saat ini. Penting Anda harus memiliki izin untuk melihat pratinjau tabel di lingkungan produksi. Jika Anda tidak memiliki izin, lihat Meminta izin tabel untuk memintanya. Jika izin pratinjau tabel diaktifkan dalam konfigurasi manajemen proyek ruang kerja tempat tabel berada, Anda dapat melihat pratinjau data di sini meskipun belum meminta izin kueri tabel di Security Center. Jika Anda telah mengonfigurasi aturan penyamaran data dan mengaktifkannya, aturan tersebut akan berlaku di halaman pratinjau data. Untuk informasi lebih lanjut tentang cara mengonfigurasi aturan penyamaran data, lihat Membuat aturan penyamaran data. Pratinjau data tidak didukung untuk tabel eksternal MaxCompute atau tabel MaxCompute yang berisi bidang JSON.	Melihat pratinjau data
EBS Lens		Anda dapat membuat Lensa EBS untuk tabel guna memperoleh statistik data dan distribusi melalui analisis dan interpretasi data mendalam.	Melihat Lensa EBS

Menampilkan informasi dasar tabel

Di area Basic Table Information di sisi kiri halaman detail tabel, Anda dapat melihat informasi seperti View Count, Read Count, dan Favorite Count.

Views: Jumlah kali halaman detail tabel dilihat di Peta Data dalam 30 hari terakhir. Data ini dikumpulkan secara offline dan mengalami keterlambatan T+1.
Reads: Jumlah tugas yang membaca tabel MaxCompute di lingkungan produksi dalam 30 hari terakhir. Jenis tugas mencakup SQL, Tunnel Download, integrasi data, dan API DataService Studio. Saat ini, hanya bacaan dari tugas yang terkait dengan penjadwalan yang dihitung. Bacaan dari tugas yang tidak dikelola oleh DataWorks tidak dihitung. Data ini dikumpulkan secara offline dan mengalami keterlambatan T+1.
Favorites: Jumlah kali tabel ditambahkan ke favorit. Data ini dikumpulkan secara near real-time.
Output Task: ID tugas penjadwalan DataWorks berulang yang menulis ke tabel saat ini. Jika tabel diperbarui secara berkala tetapi tidak ada ID tugas yang ditampilkan, operasi penulisan mungkin dilakukan oleh tugas penjadwalan berulang yang tidak dikelola oleh DataWorks. Hubungi pemilik tabel untuk informasi lebih lanjut. Data ini dikumpulkan secara offline dan mengalami keterlambatan T+1.
Catatan
Jika Anda tidak memiliki izin untuk melihat kode tugas output, hubungi administrator ruang kerja tempat tugas tersebut berada untuk memberikan izin yang diperlukan. Untuk informasi lebih lanjut, lihat Aktifkan isolasi kode dan log.
Storage Size: Ukuran penyimpanan logis tabel. Data ini dikumpulkan secara offline dan mengalami keterlambatan T+1.
Health Score: Menampilkan peringkat Data Health > Data Governance > Governance Health Score tabel. Anda dapat menggunakan skor ini untuk menentukan apakah tabel memerlukan tata kelola.
Deskripsi tabel: Deskripsi tabel. Anda dapat menggunakan Copilot untuk menghasilkan deskripsi secara cerdas.

Lihat detail

Klik Details untuk melihat Field Information, Partition Information, dan Change History tabel.

Informasi bidang

Anda dapat melihat informasi bidang tabel. Jika tabel merupakan tabel partisi, Anda juga dapat melihat Partition Field Information.

Operasi	Deskripsi
Edit	Setelah Anda mengklik, Anda dapat mengedit Description, Business Description, Security Level, dan Primary Key bidang. Anda dapat menggunakan Copilot untuk menghasilkan deskripsi bidang secara otomatis. Catatan Hanya Space Administrators dan pemilik tabel yang dapat mengedit bidang tabel. Jika pengguna target perlu mengedit bidang tabel, Anda dapat memberikan izin Space Administrator. Untuk informasi lebih lanjut, lihat Kontrol akses modul tingkat global. Security Level hanya ditampilkan untuk tabel dengan tingkat keamanan bidang yang diatur secara individual. Anda hanya dapat mengatur tingkat keamanan bidang tabel di sini setelah mengaktifkan fitur tingkat keamanan bidang untuk mesin MaxCompute. Untuk informasi lebih lanjut tentang cara mengaktifkan fitur tingkat keamanan, lihat Kontrol akses berbasis label.
Sarankan deskripsi bidang	Hasilkan deskripsi secara batch untuk bidang yang belum memiliki deskripsi.
Batch Edit Security Levels	Atur tingkat keamanan secara batch untuk bidang tabel guna meningkatkan keamanan data.
Upload	Setelah Anda mengklik, seret data lokal Anda ke kotak dialog Batch Upload Field Information. Catatan Hanya Workspace Administrators dan pemilik tabel yang dapat mengunggah data ke tabel target. Jika pengguna perlu mengunggah data, Anda dapat memberikan izin Workspace Administrator. Untuk informasi lebih lanjut, lihat Kontrol akses modul tingkat global. Hanya file .xlsx (Excel 2007) yang dapat diunggah. Anda juga dapat Download The Template File. Fitur ini tidak didukung untuk tabel model yang dihasilkan oleh pemodelan cerdas.
Download	Klik untuk mengunduh informasi bidang tabel saat ini.
Generate SELECT	Setelah Anda mengklik, Anda dapat melihat atau Copy pernyataan `select` untuk tabel saat ini di kotak dialog Generate Select Statement.
Hasilkan DDL	Setelah Anda mengklik, Anda dapat melihat atau Copy pernyataan pembuatan tabel untuk tabel saat ini di kotak dialog Generate DDL Statement.

Catatan

Popularitas bidang: Metrik ini berdasarkan jumlah kali bidang digunakan dalam klausa `JOIN` pernyataan SQL pada hari sebelumnya. Popularitas direpresentasikan sebagai peringkat bintang dari 0 hingga 5, dengan 5 sebagai nilai tertinggi.
Metrik terkait: Menampilkan metrik model yang terkait dengan bidang. Untuk membuat atau memperbarui asosiasi, buka Pemodelan Dimensi. Di halaman pengeditan tabel target, gunakan fitur manajemen bidang untuk memelihara asosiasi antara bidang dan metrik. Setelah Anda menerbitkan tabel model, asosiasi tersebut diterapkan.

Informasi partisi
Anda dapat melihat informasi partisi untuk tabel saat ini, seperti Partition Name, Record Count, dan Storage Size.
Catatan
- Jumlah catatan dan ukuran partisi hanya sebagai referensi, dan pembaruan data mungkin tertunda. Untuk nilai akurat, rujuk data di mesin.
- Jika tabel merupakan tabel transaksional MaxCompute, Record Count tidak didukung dan selalu ditampilkan sebagai -1. Perintah SELECT COUNT(*) FROM <table_name> WHERE <partition>; memberikan nilai akurat.
Riwayat perubahan
Anda dapat melihat catatan perubahan untuk tabel saat ini, seperti Change Description, Change Type, dan Granularity.
Di pojok kiri atas tab Change Records, Anda dapat memfilter catatan berdasarkan jenis perubahan.

Lihat informasi lineage

Lineage menunjukkan hubungan antara tabel dan bidang. Lineage diperoleh dengan menguraikan aliran data aktual dari pekerjaan penjadwalan, sinkronisasi data, dan proses lainnya. Di halaman lineage, Anda dapat melihat node hulu dan hilir dari tabel atau bidang, melacak sumber asli data tabel, dan mengidentifikasi database tujuan akhir. Anda juga dapat menganalisis dampak perubahan di berbagai tingkat lineage.

Catatan

Hanya Edisi Standar DataWorks dan versi yang lebih baru yang mendukung melihat informasi lineage.
Lineage tabel dan bidang diperoleh dengan menguraikan aliran data aktual dari proses seperti pekerjaan penjadwalan untuk menentukan hubungan antara tabel dan bidang berbeda. Lineage dihasilkan secara real time.
Informasi lineage tidak mendukung hubungan yang dihasilkan oleh operasi manual seperti kueri sementara.
Jika Peta Data tidak dapat menampilkan lineage data yang dihasilkan oleh pernyataan SQL yang dieksekusi di node PyODPS, Anda dapat mengatur parameter terkait secara manual untuk penjadwalan DataWorks di kode tugas PyODPS. Untuk informasi lebih lanjut, lihat Mengembangkan tugas PyODPS 3 dan Mengembangkan tugas PyODPS 2.

Lihat lineage tabel
Di tab Table Lineage, Anda dapat melihat detail lineage untuk tabel saat ini. Fitur utama sebagai berikut:
- Anda dapat melihat jumlah node hulu dan hilir untuk setiap node dalam lineage tabel. Anda dapat mengarahkan kursor ke tabel atau jenis tugas untuk melihat informasi dasarnya.
- Saat Anda mengklik node, panel mengambang muncul. Di bagian asosiasi lineage panel ini, Anda dapat memasukkan kata kunci untuk menampilkan semua tabel hilir yang mengandung kata kunci tersebut. Anda juga dapat memasukkan @+nama_akun untuk menampilkan semua tabel hilir di bawah akun tersebut.
- Anda dapat mengklik + atau - di graf lineage untuk memperluas atau menciutkan node hulu dan hilir.
Lihat lineage bidang
Di tab Field Lineage, Anda dapat melihat detail lineage untuk bidang target. Fitur utama sebagai berikut:
- Di area Switch Field, Anda dapat beralih antar bidang tabel saat ini untuk melihat graf lineage bidang yang sesuai.
- Anda dapat melihat jumlah node hulu dan hilir untuk setiap node dalam lineage bidang. Anda dapat mengarahkan kursor ke bidang atau jenis tugas untuk melihat informasi dasarnya.
- Anda dapat mengklik + atau - di graf lineage untuk memperluas atau menciutkan node hulu dan hilir.
Analisis dampak
Jika skema atau data tabel saat ini berubah, node hilir akan terpengaruh. Anda dapat menggunakan Impact Analysis untuk mengidentifikasi tabel hilir dan memprediksi tabel mana yang mungkin terpengaruh oleh perubahan. Di halaman ini, Anda dapat memfilter berdasarkan kriteria seperti tingkat lineage, jenis tugas, dan jenis tabel untuk menampilkan tabel hilir yang memenuhi kondisi yang ditentukan. Anda juga dapat mengunduh hasil analisis.
Catatan
Anda dapat menganalisis hingga 50 tingkat lineage tabel.

Lihat kesehatan data

Anda dapat melihat detail tata kelola data dan status kualitas data tabel.

Detail tata kelola data memberikan gambaran cepat tentang skor kesehatan tata kelola tabel, tren masalah tata kelola, dan masalah tata kelola spesifik. Hal ini memungkinkan Anda menyelesaikan masalah tata kelola dengan cepat.
- Health Score: Penilaian kuantitatif tabel di lima dimensi: penyimpanan, komputasi, pengembangan, kualitas, dan keamanan. Skor ini mencerminkan efektivitas tata kelola. Skor yang lebih tinggi menunjukkan tata kelola yang lebih baik.
- Trend Of Issues Requiring Governance: Menunjukkan tren historis masalah tata kelola, membantu Anda memahami riwayat tata kelola tabel.
- Governance Item Issues: Menampilkan daftar masalah yang perlu ditangani. Anda dapat mengklik nama masalah di kolom Governance Item Issues atau tombol Tangani di kolom Tindakan untuk membuka Data Asset Administration > Overview > Governance Work Items untuk menangani item pekerjaan tata kelola.
Status kualitas data menunjukkan detail aturan untuk tabel dan peringatan Kualitas Data yang dihasilkan.

Lihat catatan penggunaan

Halaman ini menampilkan Usage Records untuk tabel berdasarkan dimensi Asosiasi Sering dan Statistik Akses.

Frequent Associations: Menampilkan jumlah pengguna yang mengakses data pada tabel saat ini.
Catatan
Ini adalah jumlah kali tabel digunakan dalam kondisi join untuk perhitungan dalam 30 hari terakhir. Data ini dikumpulkan secara offline dan mengalami keterlambatan T+1.
Access Statistics: Menampilkan catatan penggunaan tabel dalam bentuk grafik.
- Read Trend Chart: Grafik garis menunjukkan jumlah bacaan per hari dan membedakan antara bacaan dari lingkungan pengembang dan produksi. Jumlah asosiasi bidang terkait dengan jumlah eksekusi tugas dan jumlah kali bidang muncul dalam kode. Data ini dikumpulkan secara offline dan mengalami keterlambatan T+1.
  Misalnya, jika suatu bidang muncul sekali dalam tugas yang dieksekusi dua kali, jumlahnya adalah 2. Jika suatu bidang muncul dua kali dalam kode, satu eksekusi tugas menghasilkan jumlah 2 untuk bidang tersebut.
- Field References In Clauses: Menunjukkan statistik jumlah kali suatu bidang digunakan dalam pernyataan SQL, seperti dalam klausa `WHERE`, `SELECT`, `JOIN`, dan `GROUP BY`. Data ini dikumpulkan secara offline dan mengalami keterlambatan T+1.
- Top Readers: Menunjukkan statistik pengguna yang telah membaca tabel dalam SQL dalam 30 hari terakhir. Ini mencakup akses oleh akun penyewa yang digunakan untuk penjadwalan dan akun individu. Operasi baca mencakup klausa `WHERE`, `SELECT`, `JOIN`, dan `GROUP BY` yang mereferensikan bidang. Data ini dikumpulkan secara offline dan mengalami keterlambatan T+1.

Lihat pratinjau data

Selain melihat detail tabel yang dipilih dan 20 catatan data acak, pratinjau data memungkinkan Anda menganalisis tabel dalam buku kerja atau menggunakan kueri SQL.

Pratinjau dalam buku kerja: Di halaman pratinjau data, klik Preview In Workbook. Ini akan mengarahkan Anda ke DataAnalysis > Workbooks, dan buku kerja baru dibuat secara otomatis untuk menampilkan data tabel yang dipilih.
Analisis data: Di halaman pratinjau data, klik Data Analysis. Ini akan mengarahkan Anda ke DataAnalysis > SQL Query, dan file Kueri SQL (Lama) dibuat secara otomatis dan diisi dengan kueri SQL untuk tabel yang dipilih.
Setelah Anda melakukan kueri tabel saat ini di Kueri SQL, Anda dapat melakukan Lensa EBS pada hasil kueri, menghasilkan buku kerja, atau membuat kartu dan laporan.

Lihat Lensa EBS

Penting

Lensa EBS tidak didukung untuk tabel yang memiliki sakelar sintaks Skema diaktifkan.

Lensa EBS menganalisis struktur dan nilai data Anda untuk menampilkan statistik dan distribusi data. Anda dapat membuat Lensa EBS langsung di halaman ini atau membuka modul DataAnalysis untuk melakukan Lensa EBS.

Meminta dan mengelola izin tabel

Anda dapat menggunakan Security Center DataWorks untuk meminta izin kueri dan operasi untuk tabel MaxCompute, lalu melihat catatan permintaan di Peta Data.

Meminta izin tabel
1. Buka halaman detail tabel dan klik Request Permissions.
  Catatan
  Jika tabel disembunyikan, tombol Request Permissions tidak ditampilkan.
2. Secara default, Anda akan diarahkan ke halaman Permission Request di Security Center versi baru. Untuk informasi lebih lanjut, lihat Kontrol Akses Data MaxCompute.
Mengelola izin tabel
1. Di panel navigasi kiri Data Map, klik My Data.
2. Di panel navigasi kiri, klik Data yang Saya Kelola. Di halaman ini, Anda dapat memperbarui siklus hidup dan visibilitas tabel, atau melakukan operasi seperti hapus, ganti pemilik, dan modifikasi kategori.
Persetujuan izin: Anda dapat membuka halaman Security Center > Data Access Control untuk melihat detail persetujuan izin dan catatan persetujuan. Untuk informasi lebih lanjut, lihat Kontrol akses data.

Mengelola tabel MaxCompute

Mengelola tabel menggunakan koleksi data

Anda dapat menambahkan tabel saat ini ke koleksi data target dan mengelola tabel di halaman detail koleksi data. Anda juga dapat melihat koleksi data yang berisi tabel saat ini. Untuk informasi lebih lanjut, lihat Koleksi data.

Mengelola tabel menggunakan navigasi kategori

Di panel navigasi kiri halaman Peta Data, klik Configuration Management > Category Management Configuration untuk mengonfigurasi navigasi berbasis kategori guna mengelola tabel MaxCompute. Untuk informasi lebih lanjut, lihat Manajemen Konfigurasi.