Setelah Anda menyambungkan instans Lindorm ke DataWorks, Anda dapat mengelola dan melihat metadata tabel Lindorm di Data Map.
Prasyarat
Parameter Spark telah dikonfigurasi pada halaman penyambungan sumber daya komputasi untuk mengumpulkan metadata dari Lindorm. Untuk informasi selengkapnya, lihat Setel parameter Spark untuk sumber daya komputasi Lindorm.
Buka Data Map
Login ke DataWorks console. Di wilayah target, klik di panel navigasi sebelah kiri. Pada halaman yang muncul, klik Go to Data Map.
Kumpulkan metadata tabel Lindorm
Di panel navigasi sebelah kiri Data Map, klik ikon
untuk membuka halaman manajemen pengumpul sumber data. Di bagian Data Source Perspective, temukan pengumpul Lindorm dan konfigurasikan rencana pengumpulan untuk mengumpulkan metadata dari tabel Lindorm. Untuk informasi selengkapnya, lihat Metadata collection.
Tabel pencarian
Setelah rencana pengumpulan metadata Lindorm berhasil dijalankan, Anda dapat melihat metadata yang telah dikumpulkan dengan mengikuti langkah-langkah berikut.
-
Klik ikon
di bilah menu sebelah kiri untuk membuka halaman pencarian. -
Di pohon direktori Type di sebelah kiri, pilih Table. Di bawah Connection, temukan dan klik sumber data Lindorm untuk membuka halaman daftar tabel Lindorm.
CatatanJika terdapat beberapa sumber data, daftar tersebut mungkin tidak ditampilkan secara lengkap. More muncul di sebelah kanan DLF. Klik More untuk menemukan sumber data Lindorm.
-
Di kotak pencarian di atas daftar tabel Lindorm, masukkan kata kunci dari nama tabel untuk menemukan tabel tersebut.
Lihat detail tabel
Pada halaman daftar tabel Lindorm, klik sebuah tabel untuk membuka halaman detailnya.
|
Feature |
Deskripsi |
Referensi |
|
Shortcut operations |
Di bagian atas halaman, Add to Album, View Added Albums, atau Add to Favorites. |
|
|
Table Basic Information |
Di bagian Table Basic Information, lihat Database, Table Type, Owner, Created At, dan apakah tabel tersebut merupakan Partitioned Table. |
|
|
Table Technical Information |
Lihat informasi seperti Path penyimpanannya, Input Format, dan Output Format. |
|
|
Details |
Lihat Field Information dan Lineage Field dari tabel tersebut. |
|
|
Lineage |
Lihat alur data antar tabel Lindorm. |
|
|
Usage Notes |
Anda dapat Edit catatan penggunaan atau lihat View Versions untuk memahami konteks bisnis data tersebut. |
Kelola favorit tabel
Pada halaman detail tabel, tambahkan atau hapus tabel dari daftar favorit Anda untuk akses cepat.
-
Tambahkan/Hapus dari favorit.
-
Add to My Favorites: Klik tombol Add to Favorites di bawah nama tabel untuk menambahkan tabel ke My Favorites.
-
Remove from My Favorites: Klik tombol Remove from Favorites di bawah nama tabel untuk menghapus tabel dari My Favorites.
-
-
Lihat tabel favorit Anda.
-
Di panel navigasi sebelah kiri Data Map, klik ikon
. Di pohon direktori, pilih untuk membuka halaman My Favorites. Pada halaman ini, atur Data Type menjadi Lindorm untuk melihat tabel Lindorm favorit Anda.
Lihat informasi dasar tabel
Di bagian kiri halaman detail tabel, lihat Table Basic Information, Technical Information, dan Business Information.
-
Table Basic Information: mencakup Table Name, Created At, dan Partitioned Table.
-
Table Technical Information: mencakup Path penyimpanan, Input Format, dan Output Format.
-
Business Information: mencakup Region of Current Workspace dan Instance.
Lihat detail tabel
Pada halaman detail tabel, klik tab Details.
-
Lihat informasi bidang.
Lihat nama dan tipe data setiap bidang dalam tabel.
-
Cari bidang.
Jika tabel berisi banyak bidang, masukkan nama bidang di kotak pencarian di bawah Field Information untuk menemukannya dengan cepat.
-
Pratinjau deskripsi bidang.
Klik Field Information di bawah Recommended Field Desc. Copilot menghasilkan deskripsi untuk membantu Anda memahami makna dan tujuan setiap bidang.
-
Lihat lineage bidang.
Klik ikon
di kolom Actions untuk sebuah bidang guna melihat lineage-nya.
Lihat informasi lineage tabel
Alur data menunjukkan hubungan antar tabel dan bidang berdasarkan aliran data aktual, seperti pekerjaan penjadwalan yang telah diurai dan sinkronisasi data. Pada halaman lineage, Anda dapat melihat node hulu dan hilir suatu tabel atau bidang, melacak sumber data mentah, serta mengidentifikasi database tujuan data tabel tersebut. Anda juga dapat menganalisis dampak lineage pada berbagai tingkatan.
-
Fitur alur data hanya tersedia di DataWorks Standard Edition dan versi yang lebih baru.
-
Lineage tabel dan bidang berasal dari aliran data aktual, seperti pekerjaan penjadwalan yang telah diurai, untuk menunjukkan hubungan antar tabel dan bidang. Ini merupakan operasi statistik real-time.
-
Jika Data Map tidak dapat menampilkan alur data yang dihasilkan oleh pernyataan SQL yang dijalankan di node Lindorm Spark SQL, Anda dapat mengatur secara manual parameter penjadwalan DataWorks terkait dalam kode pekerjaan Lindorm Spark SQL tersebut. Untuk informasi selengkapnya, lihat Sambungkan sumber daya komputasi Lindorm. Pernyataan SQL berikut dapat menghasilkan alur data:
-
insert into / insert overwrite table
-
create as select from table
-
create table
-
create table like
-
Klik tab Lineage Information pada halaman detail tabel. Anda dapat melihat Table Lineage dan Field Lineage.
-
View Table Lineage
-
Lihat informasi dasar: Arahkan pointer mouse ke tabel atau tipe node untuk melihat detailnya.
-
Lihat jumlah node hulu dan hilir: Di graf lineage tabel, Anda dapat melihat jumlah node hulu dan hilir untuk tabel saat ini.
-
Perluas atau ciutkan node: Sesuai kebutuhan, Anda dapat mengklik ikon
atau
di graf lineage untuk menampilkan atau menyembunyikan node hulu atau hilir yang sesuai.
-
-
View Field Lineage
-
Change Field: Di area Change Field, Anda dapat memilih bidang berbeda dari tabel saat ini untuk melihat graf lineage-nya.
-
Lihat informasi dasar: Arahkan pointer mouse ke bidang atau tipe node untuk melihat detailnya.
-
Lihat jumlah node hulu dan hilir: Di graf lineage bidang, Anda dapat melihat jumlah node hulu dan hilir untuk bidang saat ini.
-
Perluas atau ciutkan node: Anda dapat mengklik ikon
atau
di graf lineage untuk menampilkan atau menyembunyikan node hulu atau hilir yang sesuai.
-
Lihat catatan penggunaan tabel
Klik tab Instructions pada halaman detail tabel untuk Edit catatan atau lihat View Versions guna melacak tujuan dan penggunaan tabel dari waktu ke waktu.
-
Edit catatan penggunaan tabel.
Klik Edit. Di kotak dialog yang muncul, masukkan catatan penggunaan untuk tabel saat ini dan klik Save.
-
Lihat versi historis catatan penggunaan.
Klik View Versions untuk melihat riwayat semua perubahan. Dari riwayat ini, Anda dapat mengklik View di kolom Actions untuk versi tertentu guna melihat catatan penggunaan pada waktu tersebut.