Kumpulkan Metadata & Lintasan Lindorm melalui Data Map - DataWorks

Saat bekerja dengan data Lindorm di DataWorks, Anda memerlukan visibilitas terhadap tabel yang tersedia, skema, kepemilikan, serta alur data antar tabel tersebut. Setelah menyambungkan instans Lindorm ke DataWorks, Anda dapat menggunakan Data Map untuk mengumpulkan metadata tabel Lindorm, lalu mencari tabel, memeriksa detail tingkat bidang, melacak alur data, dan menganotasi tabel dengan konteks bisnis.

Prasyarat

Sebelum memulai, pastikan Anda telah:

Menyambungkan instans Lindorm ke DataWorks
Mengonfigurasi parameter Spark pada halaman penyambungan sumber daya komputasi untuk mengaktifkan pengumpulan metadata. Untuk detailnya, lihat Setel parameter Spark untuk sumber daya komputasi Lindorm

Navigasi ke Data Map

Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah tempat instans Anda dideploy. Di panel navigasi kiri, pilih Data Governance > Data Map, lalu klik Go to Data Map.

Kumpulkan metadata tabel Lindorm

Di panel navigasi kiri Data Map, klik ikon untuk membuka halaman manajemen Database Collector.
Pada bagian Data Source Perspective, temukan collector Lindorm.
Konfigurasikan rencana pengumpulan metadata untuk mengumpulkan metadata dari tabel-tabel Lindorm Anda.

Untuk detailnya, lihat Pengambilan metadata.

Cari tabel Lindorm

Setelah rencana pengumpulan metadata untuk Lindorm berhasil dijalankan, ikuti langkah-langkah berikut untuk menemukan tabel tertentu.

Di panel navigasi kiri Data Map, klik ikon untuk membuka halaman pencarian.
Pada pohon direktori Type di sebelah kiri, pilih Table. Di bawah Data Source, klik Lindorm untuk melihat daftar tabel Lindorm.

Catatan
Jika beberapa sumber data dikonfigurasi, daftar tersebut mungkin tidak menampilkan semuanya. Klik More di sebelah kanan Data Lake Formation untuk menemukan sumber data Lindorm.
Di kotak pencarian di atas daftar tabel, masukkan kata kunci dari nama tabel untuk memfilter hasil.

Lihat detail tabel

Pada halaman daftar tabel Lindorm, klik nama tabel untuk membuka halaman detailnya.

Halaman detail menyediakan bagian-bagian berikut:

Bagian	Deskripsi
Operasi pintasan	Add To Album, View Added Albums, atau Add To Favorites dari bagian atas halaman
Informasi Dasar Tabel	Database, tipe tabel, pemilik, waktu pembuatan, dan apakah tabel dipartisi
Informasi Teknis Tabel	Path penyimpanan, Input Format, dan Output Format
Detail	Informasi bidang dan garis keturunan bidang
Lineage	Alur data antar tabel Lindorm
Catatan Penggunaan	Anotasi konteks bisnis, lengkap dengan riwayat versi penuh

Lihat informasi dasar

Panel kiri halaman detail tabel menampilkan tiga bagian:

Informasi Dasar Tabel: Nama tabel, waktu pembuatan, dan apakah tabel dipartisi
Technical Information: Path penyimpanan dan format input/output
Informasi Bisnis: Wilayah ruang kerja dan instans Lindorm terkait

Periksa bidang

Klik tab Details untuk melihat informasi tingkat bidang.

View field names and types: Bagian Field Information mencantumkan setiap bidang dalam tabel beserta tipe datanya.
Search for a field: Masukkan nama bidang di kotak pencarian di bawah Field Information untuk menemukan bidang secara cepat saat tabel memiliki banyak bidang.
Hasilkan deskripsi bidang dengan Copilot: Klik Recommended Field Desc di bawah Field Information. Copilot menghasilkan deskripsi untuk setiap bidang berdasarkan nama dan konteksnya—sangat berguna ketika nama bidang disingkat atau tidak jelas.
Lihat garis keturunan bidang: Klik ikon di kolom Actions pada suatu bidang untuk membuka graf garis keturunannya.

Lihat alur data

Alur data menunjukkan bagaimana data mengalir antar tabel dan bidang. Alur ini diturunkan dari alur data aktual—berdasarkan pekerjaan penjadwalan dan tugas sinkronisasi data yang telah diurai—dan dihitung secara real time.

Catatan

Fitur alur data hanya tersedia di DataWorks Standard Edition dan versi setelahnya.

Lineage dihasilkan ketika jenis pernyataan SQL berikut dijalankan di node Lindorm Spark SQL: insert into, insert overwrite table, create as select from table, create table, dan create table like.

Jika Data Map tidak menampilkan lineage yang dihasilkan oleh node Lindorm Spark SQL, atur secara manual parameter penjadwalan DataWorks terkait dalam kode pekerjaan. Untuk detailnya, lihat Sambungkan sumber daya komputasi Lindorm.

Klik tab Lineage pada halaman detail tabel untuk melihat Table Lineage dan Field Lineage.

Lineage tabel

Graf lineage tabel menunjukkan hubungan hulu dan hilir untuk tabel saat ini.

Aksi	Cara
Lihat detail node	Arahkan kursor ke tabel atau node
Periksa jumlah hulu dan hilir	Jumlah ditampilkan langsung di grafik untuk setiap tabel
Perluas node	Klik ikon
Ciutkan node	Klik ikon

Garis keturunan bidang

Graf garis keturunan bidang menunjukkan bagaimana data suatu bidang mengalir ke dan dari bidang lain.

Aksi	Cara
Ganti bidang	Gunakan area Switch Field untuk memilih bidang berbeda dari tabel saat ini
Lihat detail node	Arahkan kursor ke bidang atau node
Periksa jumlah hulu dan hilir	Jumlah ditampilkan langsung di grafik untuk bidang yang dipilih
Perluas node	Klik ikon
Ciutkan node	Klik ikon

Edit catatan penggunaan

Catatan penggunaan menyimpan informasi konteks bisnis tentang suatu tabel, seperti tujuan dan skenario aplikasi terkait.

Klik tab Usage Notes pada halaman detail tabel.
Klik Edit. Di kotak dialog, masukkan catatan penggunaan untuk tabel tersebut dan klik Save.
Untuk meninjau versi sebelumnya, klik View Versions. Semua catatan versi akan ditampilkan. Klik View di kolom Actions untuk membaca catatan dari versi tertentu.

Tambahkan tabel ke favorit

Gunakan favorit untuk menandai tabel agar dapat diakses dengan cepat.

Di halaman detail tabel, klik Add To Favorites di bawah nama tabel untuk menambahkan tabel, atau klik Remove From Favorites untuk menghapusnya.
Untuk melihat semua tabel yang difavoritkan, klik ikon di panel navigasi. Di pohon direktori, pilih My Data > My Favorites. Atur Data Type menjadi Lindorm untuk memfilter tabel Lindorm yang Anda favoritkan.

Untuk detail tentang album data, lihat Tambahkan tabel ke album data.