Peta Data adalah modul dalam DataWorks yang memungkinkan Anda mengelola metadata dan aset data bisnis. Anda dapat menggunakan Peta Data untuk melihat detail metadata, menelusuri keturunan data, serta mengelola kategori data. Modul ini membantu Anda mencari, memahami, dan menggunakan data Hologres secara efisien. Topik ini menjelaskan cara mengonfigurasi crawler di Peta Data untuk mengumpulkan metadata Hologres dan operasi terkait.
Batasan
Hanya Hologres V1.1 dan versi lebih baru yang mendukung Peta Data. Jika versi instance Anda lebih lama dari V1.1,
Informasi keturunan data akan tersedia 1 jam setelah konfigurasi crawler di Peta Data.
Fitur keturunan data hanya tersedia di wilayah berikut:
Tiongkok (Hangzhou), Tiongkok (Shanghai), Tiongkok (Beijing), Tiongkok (Shenzhen), Tiongkok (Hong Kong), dan Singapura.
Kumpulkan metadata
Anda dapat menggunakan fitur pengumpulan metadata untuk mengumpulkan metadata dari sumber data Hologres ke Peta Data guna manajemen terpusat. Setelah metadata dikumpulkan, Anda dapat mencari dan melihatnya di Peta Data.
- Di bilah navigasi atas, klik Data Discovery.
Di panel navigasi sisi kiri, pilih .
Di halaman HologresMetadata Crawler, klik Create Crawler.
Di kotak dialog Create Crawler, atur parameter di setiap langkah.
Konfigurasikan informasi dasar.
Di langkah Basic Information, atur parameter sesuai kebutuhan.

Parameter
Deskripsi
Crawler Name
Wajib. Nama crawler. Anda harus menetapkan nama unik.
Crawler Description
Deskripsi crawler.
Workspace
Workspace dari sumber data tempat Anda ingin mengumpulkan metadata.
Data Source Type
Tipe sumber data tempat Anda ingin mengumpulkan metadata. Nilai defaultnya adalah Hologres dan tidak dapat diubah.
Klik Next.
Pilih sumber data Hologres.
Di langkah Select Collection Object, pilih sumber data dari daftar drop-down Data Source.
Anda hanya dapat mengumpulkan metadata dari instance Hologres yang terkait dengan workspace Anda sebagai instance mesin komputasi. Jika tidak ada sumber data yang tersedia, klik Create untuk membuat satu. Untuk informasi lebih lanjut, lihat Tambahkan sumber data Hologres.
Klik Start Testing di sebelah Test Crawler Connectivity. Jika pesan The connectivity test is successful muncul, layanan metadata DataWorks dapat terhubung ke sumber data Hologres.
CatatanJika pesan The connectivity test failed muncul, Anda harus menemukan penyebab kesalahan koneksi dan memperbaiki masalah tersebut.
Klik Next.
Konfigurasikan rencana eksekusi.
Di langkah Configure Execution Plan, konfigurasikan rencana eksekusi.
Nilai valid untuk parameter Execution Plan adalah On-demand Execution, Monthly, Weekly, Daily, dan Hourly. Rencana eksekusi yang dihasilkan bervariasi berdasarkan siklus eksekusi. Sistem mengumpulkan metadata dari sumber data Hologres berdasarkan siklus eksekusi yang Anda tentukan. Berikut ini deskripsinya:
Eksekusi Sesuai Permintaan: Sistem mengumpulkan metadata dari sumber data Hologres berdasarkan kebutuhan bisnis Anda.
Bulanan: Sistem secara otomatis mengumpulkan metadata dari sumber data Hologres sekali pada waktu tertentu di beberapa hari tertentu setiap bulan.
PentingBulan tertentu tidak memiliki tanggal 29, 30, atau 31. Di bulan-bulan ini, sistem tidak akan mengumpulkan metadata dari sumber data Hologres pada tanggal-tanggal tersebut. Kami sarankan Anda tidak memilih beberapa hari terakhir dalam sebulan.
Gambar berikut menunjukkan bahwa sistem secara otomatis mengumpulkan metadata dari sumber data Hologres sekali pada pukul 09:00 di tanggal 1, 11, dan 21 setiap bulan. Ekspresi dibuat otomatis untuk parameter Cron Expression berdasarkan nilai parameter Tanggal dan Waktu.

Mingguan: Sistem secara otomatis mengumpulkan metadata dari sumber data Hologres sekali pada waktu tertentu di beberapa hari tertentu setiap minggu.
Gambar berikut menunjukkan bahwa sistem secara otomatis mengumpulkan metadata dari sumber data Hologres sekali pada pukul 03:00 di hari Minggu dan Senin setiap minggu. Ekspresi dibuat otomatis untuk parameter Cron Expression berdasarkan nilai parameter Minggu dan Waktu.
Jika parameter Time tidak disetel, sistem secara otomatis mengumpulkan metadata dari sumber data Hologres sekali pada pukul 00:00:00 di hari-hari tertentu setiap minggu.Harian: Sistem secara otomatis mengumpulkan metadata dari sumber data Hologres sekali pada waktu tertentu setiap hari.
Gambar berikut menunjukkan bahwa sistem secara otomatis mengumpulkan metadata dari sumber data Hologres sekali pada pukul 01:00 setiap hari. Ekspresi dibuat otomatis untuk parameter Cron Expression berdasarkan nilai parameter Waktu.

Per Jam: Sistem secara otomatis mengumpulkan metadata dari sumber data Hologres sekali pada menit ke-
N × 5setiap jam.CatatanUntuk tugas pengumpulan metadata Hologres yang dijalankan setiap jam, Anda dapat menyetel nilai Menit ke kelipatan 5 menit.
Gambar berikut menunjukkan bahwa sistem secara otomatis mengumpulkan metadata dari sumber data Hologres dari menit ke-5 dan ke-10 setiap jam. Ekspresi dibuat otomatis untuk parameter Cron Expression berdasarkan nilai parameter Menit.

Klik Next.
Konfirmasikan pengaturan crawler.
Di langkah Confirm Information, periksa informasi yang Anda tentukan.
Klik Confirm.
Di halaman HologresMetadata Crawler, Anda dapat melihat informasi tentang crawler Anda dan mengelola crawler Anda.
Deskripsi berikut menunjukkan informasi yang dapat Anda lihat dan operasi yang dapat Anda lakukan:
Anda dapat melihat status dan rencana eksekusi crawler. Anda juga dapat melihat waktu mulai eksekusi terakhir, jumlah waktu yang digunakan untuk eksekusi terakhir, jumlah waktu rata-rata yang digunakan, jumlah tabel yang diperbarui dalam eksekusi terakhir, dan jumlah tabel yang dibuat dalam eksekusi terakhir.
Anda dapat mengklik Details, Edit, Delete, Run, atau Stop di kolom Actions untuk melakukan operasi yang diinginkan.
Details: Lihat nama crawler dan sumber data serta rencana eksekusi yang dikonfigurasi untuk crawler.
Edit: Ubah konfigurasi crawler.
Delete: Hapus crawler.
Run: Jalankan tugas untuk mengumpulkan metadata dari sumber data Hologres. Tombol Run hanya tersedia jika parameter Execution Plan disetel ke On-demand Execution.
Stop: Hentikan crawler. Tombol Hentikan hanya ditampilkan jika crawler berada dalam status Tertunda.
Operasi lain yang didukung
Lihat Data Keseluruhan
Di tab Ikhtisar halaman DataMap, Anda dapat melihat informasi statistik dan tabel semua database Hologres yang memiliki crawler data dikonfigurasi di suatu wilayah. Untuk informasi lebih lanjut, lihat Lihat Data Keseluruhan.

Cari Tabel
Peta Data memungkinkan Anda mencari tabel berdasarkan nama tabel, deskripsi tabel, nama bidang, dan deskripsi bidang. Anda juga dapat memfilter tabel berdasarkan kategori, proyek, dan database. Untuk informasi lebih lanjut, lihat Cari Tabel.

Lihat Detail Tabel
Anda dapat pergi ke halaman detail tabel dan melihat detail tabel, seperti informasi dasar, informasi output, dan informasi keturunan tabel. Untuk informasi lebih lanjut, lihat Lihat Detail Tabel.
Anda dapat melihat metadata tabel.

Anda dapat melihat informasi keturunan tabel dan keturunan bidang.
