DataWorks：Peta Data

Batasan versi

• Pencarian kode dan analisis alur data hanya didukung di DataWorks Edisi Standar atau yang lebih tinggi.

• Album data hanya didukung di DataWorks Edisi Profesional atau yang lebih tinggi.

Akuisisi metadata

• Metadata MaxCompute dan DLF: Sistem menyediakan kolektor metadata bawaan untuk MaxCompute dan DLF. Peta Data secara otomatis mengumpulkan metadata tersebut.

• Jenis metadata lainnya: Anda dapat menggunakan fitur pengumpulan metadata kustom untuk mengimpor metadata dari berbagai sumber data ke dalam Peta Data guna dikelola secara terpadu. Peta Data mendukung jenis sumber data berikut: Hologres, EMR Hive, CDH Hive, StarRocks, AnalyticDB for MySQL, AnalyticDB for PostgreSQL, MySQL, PostgreSQL, Oracle, SQL Server, ClickHouse, Elasticsearch, Tablestore (OTS), Lindorm, dan OSS. Untuk informasi selengkapnya, lihat Akuisisi metadata.

Konektivitas jaringan

Untuk mengimpor metadata dari sumber data ke dalam Peta Data guna dikelola secara terpadu, Anda harus memastikan bahwa kolektor metadata Peta Data dapat mengakses database Anda. Jika database sumber menggunakan daftar putih untuk kontrol akses, tambahkan blok alamat IP dari wilayah tempat ruang kerja DataWorks Anda berada ke daftar putih database tersebut. Untuk informasi selengkapnya mengenai daftar putih yang perlu dikonfigurasi, lihat Konfigurasi daftar putih alamat IP untuk sumber data yang digunakan untuk akuisisi metadata.

Ikhtisar data

• Pada halaman Ikhtisar, Anda dapat melihat informasi berikut mengenai MaxCompute di wilayah saat ini: jumlah total proyek, tabel, dan API; total penyimpanan; grafik tren penyimpanan; proyek teratas berdasarkan penyimpanan; tabel teratas berdasarkan penyimpanan; serta tabel populer.

• Setelah metadata diakuisisi, Anda dapat melihat informasi seperti jumlah total database, tabel, dan API untuk sumber data seperti AnalyticDB for MySQL 3.0, MySQL, Hologres, AnalyticDB for PostgreSQL, dan Tablestore.

Untuk informasi selengkapnya, lihat Ikhtisar data.

Pengambilan metadata

Peta Data mengumpulkan metadata untuk objek-objek seperti tabel, kode, indeks, API, set data, model AI, tugas algoritma, layanan model, dan ruang kerja. Anda dapat mencari objek-objek ini dalam wilayah saat ini menggunakan kondisi filter seperti jenis, ruang kerja, pemilik, lingkungan, tag, dan kategori. Untuk informasi selengkapnya, lihat Kueri dan kelola data umum.

Anda juga dapat melihat tabel dan set data dari sumber data dalam format katalog data.

Detail metadata

Setelah menemukan objek target di Peta Data, Anda dapat mengklik nama objek tersebut untuk membuka halaman detailnya.

• Untuk tabel, Anda dapat melihat detail seperti Basic Information, Output Information, dan Lineage Information. Untuk informasi selengkapnya, lihat Lihat detail tabel.

  Catatan

  Pada tab Lineage, Anda dapat melihat garis keturunan yang ditangkap secara otomatis dari node mesin. Halaman produk menyediakan detail mengenai dukungan lineage untuk node mesin tertentu. Selain itu, Anda dapat melihat alur data end-to-end dari tabel MaxCompute yang digunakan untuk sinkronisasi batch, termasuk tabel leluhur dan tabel turunannya. Dengan memperluas level lineage tabel, Anda dapat melihat informasi mengenai sumber data asli dan database tujuan tabel tersebut.

• Untuk API, Anda dapat melihat informasi seperti informasi parameter, contoh tanggapan, informasi lineage, dan instruksi. Untuk informasi selengkapnya, lihat Lihat detail API.

  

• Untuk set data, Anda dapat melihat informasi seperti informasi properti, informasi lineage, dan instruksi.

  

Anda juga dapat mengambil dan melihat kode. Anda dapat mengklik Detail untuk menuju ke sumbernya, seperti node atau sumber daya. Untuk informasi selengkapnya mengenai detail metadata, lihat Temukan dan proses data.

Organisasi dan manajemen tabel

Fitur manajemen kategori membantu Anda mengatur dan mengelola tabel berdasarkan kategori secara efisien. Setelah mengonfigurasi kategori untuk tabel, Anda dapat memfilter tabel tertentu berdasarkan kategori saat melakukan pencarian. Untuk informasi selengkapnya, lihat Manajemen konfigurasi.

• Album data: DataWorks memungkinkan Anda mengorganisir data yang terkait dengan topik tertentu ke dalam album data yang dikelola dari perspektif bisnis. Hal ini membantu Anda melihat dan mengelola data.

• Manajemen kategori

  1. Tambahkan tabel ke kategori tertentu secara batch pada halaman Configuration Management > Category Navigation Configuration.

     Setelah mengonfigurasi navigasi kategori, Anda dapat memilih kategori tingkat terakhir. Kemudian, gunakan entri penambahan cepat pada antarmuka untuk menambahkan beberapa tabel dari suatu proyek ke kategori tersebut secara batch. Untuk informasi selengkapnya, lihat Manajemen konfigurasi.

  2. Anda dapat menambahkan tabel secara batch ke kategori tertentu pada halaman My Data.

     Setelah mengonfigurasi kategori, buka halaman Data Saya (Dimiliki oleh Saya atau Dikelola oleh Saya) untuk menambahkan tabel ke kategori tertentu secara batch. Untuk informasi selengkapnya, lihat Data Saya.

• Manajemen tabel: Untuk data MaxCompute, Peta Data memungkinkan Anda memodifikasi nama tampilan dan siklus hidup secara batch, menghapus tabel pengembangan atau produksi secara batch, serta mengubah pemilik tabel secara batch. Untuk informasi selengkapnya, lihat Data Saya.

• Favorit: Peta Data memungkinkan Anda menambahkan tabel yang Anda ikuti ke favorit. Hal ini memberikan manajemen terpusat dan membantu Anda menemukan serta melihat tabel dengan cepat. Anda dapat melihat tabel favorit Anda dalam grup My Favorites pada halaman My Data. Untuk informasi selengkapnya, lihat Data Saya.

  • Tambahkan tabel ke My Favorites: Pada halaman detail tabel, klik tombol favorit untuk menambahkan tabel ke My Favorites. Untuk informasi selengkapnya, lihat Lihat detail tabel. Setelah menambahkan tabel ke favorit, Anda dapat melihatnya dalam grup My Favorites pada halaman My Data. Untuk informasi selengkapnya, lihat Tambahkan tabel ke favorit.

  • Untuk menghapus tabel dari daftar My Favorites:

    • Pada halaman My Data, Anda dapat menghapus tabel dari grup My Favorites.

    • Pada halaman detail tabel favorit, klik Remove From Favorites untuk menghapus tabel dari favorit Anda.

Kontrol izin tabel

• Meminta izin operasi tabel

  Secara default, Pengguna RAM dalam ruang kerja mode standar tidak dapat menggunakan perintah SQL untuk langsung mengoperasikan tabel produksi. Untuk mengoperasikan tabel produksi atau melakukan kueri lintas akun, Anda harus meminta izin. Untuk meminta izin yang diperlukan, buka halaman detail tabel dan klik Request Permissions. Anda kemudian akan diarahkan ke Security Center untuk menyelesaikan permintaan tersebut. Untuk informasi selengkapnya, lihat Minta izin pada tabel.

  Catatan

  Jika Pengguna RAM tidak memiliki izin kueri untuk suatu tabel, pengguna tersebut tidak dapat melakukan pratinjau data tabel pada halaman detail tabel di Peta Data secara default.

• Kontrol izin pratinjau data untuk tabel MaxCompute

  Pada tab Project Management Configuration halaman Configuration Management, Anda dapat mengaktifkan izin pratinjau untuk tabel pengembangan atau produksi MaxCompute dalam ruang kerja tertentu. Setelah izin ini diaktifkan, semua anggota dalam ruang kerja dapat melakukan pratinjau tabel dalam proyek tersebut tanpa perlu meminta izin akses. Untuk informasi selengkapnya, lihat Konfigurasi manajemen proyek.

  Catatan

  • Operasi ini dapat menyebabkan kebocoran data sensitif. Evaluasi risiko dan lanjutkan dengan hati-hati.

  • Pemilik proyek atau administrator ruang kerja dapat melakukan operasi ini.

  • Izin ini hanya mengontrol fitur Data Preview pada halaman detail tabel di Peta Data.

• Sembunyikan tabel: Setelah disembunyikan, tabel tersebut tidak akan muncul dalam hasil pencarian. Anda dapat menyembunyikan tabel dari semua orang atau membuatnya hanya terlihat oleh pengguna dalam ruang kerja tempat tabel tersebut berada. Untuk informasi selengkapnya, lihat Data Saya.

  • Sembunyikan satu tabel: Pada tab Dimiliki oleh Saya halaman My Data, perbarui visibilitas tabel tersebut.

    Catatan

    Secara default, pemilik tabel dan administrator ruang kerja tidak terpengaruh oleh pengaturan visibilitas ini.

    

  • Sembunyikan tabel secara batch di tingkat proyek: Pada tab Project Management Configuration halaman Configuration Management, Anda dapat memilih Project dan mengatur properti sembunyikan untuk semua tabel dalam proyek tersebut.

    

Segarkan metadata tabel

Jika suatu tabel ada tetapi tidak dapat ditemukan dalam pencarian, atau jika tabel diperbarui tetapi perubahan tersebut tidak muncul di Peta Data, Anda perlu menyegarkan metadata tabel tersebut.

1. Pada halaman hasil pencarian, klik Refresh Table Metadata.

2. Buka halaman My Data > Refresh Table Metadata di Peta Data:

   

Setelah menyelesaikan salah satu operasi ini, Anda dapat mencari kembali tabel tersebut di Peta Data.