DataWorks:Tata Kelola Aset Data

Batasan

• Edisi

  Hanya DataWorks Edisi Perusahaan atau edisi yang lebih tinggi yang mendukung Tata Kelola Aset Data. Untuk informasi mengenai edisi DataWorks, lihat DataWorks: Fitur berdasarkan edisi. Untuk informasi cara mengaktifkan DataWorks, lihat Panduan pembelian.

• Wilayah

  Tata Kelola Aset Data tersedia di wilayah berikut: Tiongkok (Hangzhou), Tiongkok (Shanghai), Tiongkok (Beijing), Tiongkok (Zhangjiakou), Tiongkok (Shenzhen), Tiongkok (Chengdu), Tiongkok (Hong Kong), Singapura, Jepang (Tokyo),

  Malaysia (Kuala Lumpur), Indonesia (Jakarta), Jerman (Frankfurt), AS (Silicon Valley), dan AS (Virginia).

• Izin

  • Tabel berikut menjelaskan izin yang dimiliki setiap peran pada Tata Kelola Aset Data.

    Peran	Izin	Referensi
    Administrator tata kelola data tingkat tenant	Administrator tata kelola data tingkat tenant dapat melihat laporan tata kelola, isu tata kelola, dan event pemeriksaan dari perspektif Global serta melakukan tindakan korektif yang diperlukan.	Untuk informasi cara memberikan izin kepada pengguna, lihat bagian Mengelola peran anggota tenant dalam topik Mengelola izin layanan tingkat global. Untuk informasi lebih lanjut mengenai izin administrator tata kelola data, lihat bagian Tata Kelola Data dalam topik Izin peran bawaan tingkat ruang kerja.
    Administrator ruang kerja	Administrator ruang kerja dapat melihat laporan tata kelola dari perspektif Workspace View. Untuk melihat laporan tata kelola ruang kerja tertentu, Anda harus memiliki peran administrator ruang kerja tersebut.	Untuk informasi cara memberikan izin kepada pengguna, lihat bagian Menambahkan Pengguna RAM ke ruang kerja sebagai anggota dan menetapkan peran kepada anggota dalam topik Mengelola izin layanan tingkat ruang kerja. Untuk informasi cara melihat laporan tata kelola, lihat bagian Melihat laporan penilaian tata kelola dalam topik Melihat hasil tata kelola data.
    Administrator tata kelola data tingkat ruang kerja	Administrator tata kelola data tingkat ruang kerja dapat melihat dan mengelola konten tata kelola data ruang kerja tempat peran tersebut berada. Catatan Peran ini tidak memiliki izin untuk melihat situasi tata kelola data semua ruang kerja dalam suatu wilayah dari dimensi global atau mengelola operasi tata kelola global, seperti mengaktifkan item pemeriksaan di tingkat global. Jika Anda ingin memberikan izin kepada Pengguna Resource Access Management (RAM) untuk melakukan operasi tata kelola global, tetapkan peran Administrator Tata Kelola Data di tingkat tenant kepada Pengguna RAM tersebut. Untuk informasi lebih lanjut, lihat Peran Administrator Tata Kelola Data tingkat tenant.	Untuk informasi cara memberikan izin kepada pengguna, lihat bagian Menambahkan Pengguna RAM ke ruang kerja sebagai anggota dan menetapkan peran kepada anggota dalam topik Mengelola izin layanan tingkat ruang kerja. Untuk informasi fitur yang didukung oleh peran administrator tata kelola data tingkat ruang kerja, lihat bagian Tata Kelola Data dalam topik Izin peran bawaan tingkat ruang kerja.
    Pengguna umum	Pengguna umum adalah personel yang menangani isu-isu yang terdeteksi dalam Tata Kelola Aset Data. Pengguna umum dapat melihat event pemeriksaan dan isu tata kelola dari dimensi personal serta melakukan operasi perbaikan. Jika Anda ingin melakukan operasi perbaikan terhadap isu yang terdeteksi di ruang kerja suatu tenant, Anda harus ditambahkan sebagai anggota ruang kerja tersebut. Catatan Secara default, kecuali Akun Alibaba Cloud dan Pengguna RAM yang dilampiri kebijakan AliyunDataWorksFullAccess, semua pengguna lain merupakan pengguna umum dalam suatu tenant.	Untuk informasi cara memberikan izin kepada pengguna, lihat bagian Menambahkan Pengguna RAM ke ruang kerja sebagai anggota dan menetapkan peran kepada anggota dalam topik Mengelola izin layanan tingkat ruang kerja.

  • Hanya Akun Alibaba Cloud dan Pengguna RAM yang dilampiri kebijakan AliyunDataWorksFullAccess yang dapat menggunakan semua fitur Tata Kelola Aset Data. Jika Anda ingin menggunakan semua fitur Tata Kelola Aset Data sebagai Pengguna RAM, Anda harus mengajukan izin yang diperlukan. Untuk informasi lebih lanjut, lihat bagian Memberikan izin untuk melakukan operasi di DataWorks kepada Pengguna RAM dalam topik Menyiapkan Pengguna RAM.

• Sumber daya komputasi

  Saat ini, Tata Kelola Aset Data hanya mendukung sumber daya komputasi MaxCompute, E-MapReduce (EMR), dan Hologres.

  Catatan

  • Untuk menggunakan sumber daya komputasi Hologres dalam Tata Kelola Aset Data, Anda harus terlebih dahulu mengumpulkan metadata-nya dengan Data Map. Untuk informasi lebih lanjut, lihat Pengumpulan metadata.

  • Tata Kelola Aset Data mendukung sumber daya komputasi Hologres hanya di wilayah Tiongkok (Beijing), Tiongkok (Shanghai), Tiongkok (Hangzhou), dan Tiongkok (Shenzhen).

Logika tata kelola data

Tata Kelola Aset Data mendeteksi event pemeriksaan berdasarkan item pemeriksaan sebelum tugas pengembangan data diajukan dan diterapkan. Setelah tugas diajukan dan diterapkan, sistem mendeteksi isu tata kelola berdasarkan item tata kelola. Pendekatan ini membantu Anda menangani event dan isu terkait data secara komprehensif. Jika pemeriksaan suatu item dipicu untuk suatu tugas dan tugas tersebut gagal dalam pemeriksaan, sebuah event akan dihasilkan. Event yang parah dapat menghentikan proses pengembangan data selanjutnya. Anda dapat melihat dan menangani event tersebut di Tata Kelola Aset Data. Setelah event ditangani dan tugas lolos pemeriksaan, Anda dapat melanjutkan proses pengembangan data. Gambar berikut menggambarkan logika tata kelola data.

DataWorks menyediakan ruang kerja dalam mode standar dan mode dasar. Proses pengembangan tugas berbeda tergantung pada mode ruang kerja. Dalam topik ini, ruang kerja dalam mode standar digunakan untuk menggambarkan cara mengembangkan tugas. Proses pengembangan tugas aktual bergantung pada mode ruang kerja Anda. Untuk informasi lebih lanjut mengenai proses pengembangan umum di ruang kerja dengan mode berbeda, lihat DataStudio (legacy).

• Jalankan pemeriksaan berdasarkan item pemeriksaan.

  Item pemeriksaan digunakan untuk memeriksa data terhadap pelanggaran item pemeriksaan sebelum tugas diajukan dan diterapkan. Sebelum mengajukan dan menerapkan tugas, Anda dapat memverifikasi apakah tugas tersebut melanggar item pemeriksaan yang telah ditentukan. Jika sistem mendeteksi pelanggaran, sebuah event pemeriksaan akan dihasilkan untuk menghentikan proses pengembangan tugas selanjutnya. Anda dapat menangani isu terkait event tersebut sehingga proses pengembangan tugas dapat berjalan sesuai harapan.

• Jalankan pemeriksaan berdasarkan item tata kelola.

  Deteksi item tata kelola merupakan mekanisme tata kelola pasca-penerapan. Anda dapat menggunakan perspektif Global, Individual, atau Workspace View dalam Tata Kelola Aset Data untuk melihat item tata kelola yang belum terselesaikan. Personel tata kelola data dapat menggunakan informasi ini untuk dengan cepat menemukan dan menyelesaikan isu, membantu tim mencapai tujuan tata kelolanya.

Proses tata kelola data

1. Konfigurasikan alat tata kelola.

   • Aktifkan templat rencana tata kelola dan konfigurasikan item kustom.

     Operasi	Deskripsi	Referensi
     Konfigurasikan item pemeriksaan kustom	Jika item pemeriksaan yang disediakan dalam templat tidak memenuhi kebutuhan bisnis Anda, Anda dapat mengonfigurasikan item pemeriksaan kustom sesuai kebutuhan bisnis Anda. Buat item pemeriksaan untuk ekstensi kustom terdaftar. DataWorks juga memungkinkan Anda membuat item pemeriksaan di Tata Kelola Aset Data untuk ekstensi kustom. Setelah Anda membuat item pemeriksaan tersebut, Tata Kelola Aset Data akan mendeteksi event pemeriksaan yang dipicu oleh ekstensi kustom tersebut. Nonaktifkan item pemeriksaan. Jika templat rencana tata kelola berisi item pemeriksaan yang tidak diperlukan untuk suatu ruang kerja, Anda dapat menonaktifkan item pemeriksaan tersebut untuk ruang kerja ini. Setelah Anda menonaktifkan item pemeriksaan tersebut, Tata Kelola Aset Data tidak lagi mendeteksi event pemeriksaan yang dipicu oleh item pemeriksaan tersebut di ruang kerja yang ditentukan.	Konfigurasikan item pemeriksaan
     Konfigurasikan item tata kelola kustom	Jika templat rencana tata kelola berisi item tata kelola yang tidak diperlukan untuk suatu ruang kerja, Anda dapat membuat aturan untuk menonaktifkan item tata kelola tersebut di ruang kerja yang ditentukan. Setelah Anda menonaktifkan item tata kelola tersebut, Tata Kelola Aset Data tidak lagi mendeteksi isu tata kelola berdasarkan item tata kelola tersebut di ruang kerja yang ditentukan. Isu tata kelola yang terdeteksi tidak akan ditampilkan di tab Governance Issue. Catatan Anda hanya dapat menonaktifkan item tata kelola opsional. Anda tidak dapat menonaktifkan item tata kelola wajib atau membuat item tata kelola baru.	Konfigurasikan item tata kelola

   • Opsional. Konfigurasikan unit tata kelola.

     DataWorks memungkinkan Anda melakukan tata kelola data pada beberapa ruang kerja secara terpusat dengan membuat unit tata kelola sesuai kebutuhan bisnis Anda. Anda kemudian dapat melihat statistik skor kesehatan keseluruhan, isu tata kelola, dan event pemeriksaan untuk ruang kerja dalam unit tata kelola tersebut. Untuk informasi lebih lanjut tentang cara membuat dan mengelola unit tata kelola, lihat Konfigurasikan unit tata kelola.

   • Opsional. Konfigurasikan metode notifikasi isu.

     Jika Anda ingin sistem memberi notifikasi kepada personel tertentu mengenai isu yang terdeteksi melalui pesan sistem, email, pesan grup DingTalk, dan URL webhook, Anda dapat mengonfigurasikan metode notifikasi isu. Dengan demikian, personel yang ditentukan dapat segera melihat dan menangani isu tersebut. Untuk informasi lebih lanjut, lihat Pengaturan alert.

2. Mulai pemeriksaan dan tangani isu tata kelola yang terdeteksi.

   • Periksa data terhadap pelanggaran item pemeriksaan sebelum data diajukan dan diterapkan.

     DataWorks melakukan pemeriksaan berdasarkan item pemeriksaan. Sebelum data diajukan dan diterapkan, sistem memeriksa data berdasarkan item pemeriksaan tersebut. Jika data melanggar item pemeriksaan, event pemeriksaan akan dihasilkan. Anda kemudian dapat melihat dan menangani event tersebut. Untuk informasi lebih lanjut, lihat Tangani event pemeriksaan.

   • Jalankan pemeriksaan setelah penerapan tugas.

     DataWorks mendeteksi masalah tata kelola berdasarkan item tata kelola setelah data di-commit dan di-deploy. Anda kemudian dapat melihat serta menangani masalah tersebut. Untuk informasi selengkapnya, lihat Menangani event pemeriksaan.

   • Jalankan pemeriksaan asset 360.

     Anda dapat menggunakan fitur asset 360 untuk mendeteksi, melihat, dan menangani isu tata kelola pada tugas dan tabel tertentu. Untuk informasi lebih lanjut, lihat Asset 360.

   • Lakukan tata kelola otomatis untuk tampilan yang di-materialisasi.

     Tata Kelola Aset Data mendukung tampilan yang di-materialisasi berdasarkan tata kelola otomatis dan rekomendasi cerdas. Ini merupakan solusi cerdas dan otomatis untuk tugas komputasi data besar yang sering menangani banyak subkueri serupa. Untuk informasi lebih lanjut, lihat Tampilan yang di-materialisasi.

   Jika isu yang tidak valid terdeteksi dalam proses ini, Anda dapat menambahkan isu tersebut ke daftar putih atau melakukan undeploy terhadap tugas atau tabel terkait tempat isu tidak valid tersebut terdeteksi. Untuk informasi lebih lanjut, lihat Tambahkan isu ke daftar putih dan Undeploy graceful.

3. Pilih dimensi analisis.

   • Berdasarkan skenario penggunaan: DataWorks menyediakan berbagai dimensi seperti produksi data, penggunaan data, dan manajemen data untuk membantu Anda menganalisis efektivitas tata kelola data dan mengelola data secara efisien.

   • Berdasarkan penggunaan sumber daya secara rasional: DataWorks menyediakan statistik mengenai konsumsi sumber daya dan status eksekusi tugas, jumlah dan status penyimpanan tabel MaxCompute, serta ikhtisar dan rincian penggunaan sumber daya. Pengembang dan administrator data dapat melihat serta menganalisis situasi sumber daya keseluruhan suatu ruang kerja dan menggunakan sumber daya secara rasional berdasarkan statistik tersebut. Untuk informasi lebih lanjut mengenai analisis aset, lihat Analisis aset.

4. Lihat hasil tata kelola.

   Setelah menangani isu tata kelola, Anda dapat membuka halaman Overview > Workbench untuk melihat hasil tata kelola dari berbagai perspektif. Dengan menganalisis hasil tersebut, Anda dapat dengan cepat mengidentifikasi dimensi dan kategori yang memiliki isu tata kelola terbanyak, yang membantu Anda mendorong penyelesaian dan mencapai tujuan tata kelola.

   Tata Kelola Aset Data menghitung skor kesehatan berdasarkan item tata kelola menggunakan model penilaian kesehatan. Anda dapat melihat skor kesehatan pada laporan tata kelola dan papan peringkat tata kelola untuk memahami hasil tata kelola. Skor kesehatan yang lebih tinggi menunjukkan hasil tata kelola yang lebih baik. Untuk informasi lebih lanjut mengenai skor kesehatan, lihat bagian Penilaian kuantitatif: skor kesehatan dalam topik Ikhtisar.

Penilaian kuantitatif: skor kesehatan

Skor kesehatan adalah skor gabungan yang mencerminkan kondisi aset data Anda. Sistem menghitungnya menggunakan teknik pemrosesan data dan pembelajaran mesin pada metadata seperti perilaku pengguna, karakteristik data, dan properti tugas di seluruh produksi, distribusi, dan manajemen data. Sistem skor kesehatan dibangun di atas lima domain utama: penyimpanan, komputasi, R&D, kualitas, dan keamanan, dengan lima metrik skor kesehatan yang sesuai. Halaman skor kesehatan menampilkan grafik radar dengan skor tata kelola untuk lima dimensi: R&D, penyimpanan, komputasi, kualitas, dan keamanan. Halaman ini juga menyediakan informasi tren bulan ke bulan.

Skor kesehatan berkisar antara 0 hingga 100. Skor yang lebih tinggi menunjukkan aset data yang lebih sehat, membantu Anda menggunakan data secara aman, efisien, dan stabil serta menjamin produksi data dan operasi bisnis. Tata Kelola Aset Data menggunakan model penilaian kesehatan bawaan untuk melakukan penilaian kuantitatif terhadap efektivitas tata kelola data akun Anda dan menghasilkan skor kesehatan keseluruhan serta skor kesehatan untuk setiap dimensi tata kelola. Skor kesehatan yang lebih tinggi menunjukkan efektivitas tata kelola yang lebih baik. Tabel berikut menjelaskan tingkat penilaian dan rentang skor kesehatan untuk setiap tingkat.

• Sangat Baik: [90, 100]

• Baik: [75, 90)

• Cukup: [60, 75)

• Perlu Peningkatan: [30, 60)

• Buruk: [0,30)

Istilah

• Check item: Mekanisme tata kelola proaktif yang diterapkan selama alur kerja produksi data. Mekanisme ini melakukan pemeriksaan awal pada tahap-tahap kritis, seperti eksekusi dan penerapan tugas, untuk mengidentifikasi potensi isu seperti pemindaian tabel penuh atau ketergantungan penjadwalan yang hilang. Jika sistem mendeteksi item yang tidak sesuai, sistem akan menghasilkan check event dan secara otomatis menghentikan proses tersebut. Hal ini menegakkan standarisasi dan menormalisasi pemrosesan data.

• Governance Item: Item tata kelola mendefinisikan potensi isu atau area untuk optimalisasi yang diidentifikasi selama tata kelola data. Item ini mencakup bidang-bidang seperti standar pengembangan, kualitas data, kepatuhan keamanan, dan pemanfaatan sumber daya. Item tata kelola dibagi menjadi item wajib dan item opsional. Item wajib diaktifkan secara default dan tidak dapat diubah, sedangkan item opsional dapat diaktifkan sesuai kebutuhan. Contohnya termasuk Task running time is too long, Continuous error nodes, dan No one visits leaf nodes.

• Governance Issue: Isu yang terdeteksi oleh pemindaian item tata kelola yang memerlukan penyelesaian.

• Governance unit: Unit tata kelola terdiri dari satu atau beberapa ruang kerja. Anda dapat melihat statistik skor kesehatan keseluruhan, isu tata kelola, dan event pemeriksaan ruang kerja dalam unit tata kelola tersebut.

• Governance plan: Tata Kelola Aset Data menyediakan templat rencana tata kelola untuk berbagai skenario tata kelola, dengan fokus mencapai tujuan tata kelola yang telah ditentukan dalam periode tertentu. Templat rencana tata kelola dapat digunakan untuk dengan cepat menentukan item tata kelola dan item pemeriksaan yang sangat relevan serta mengidentifikasi objek yang dapat dioptimalkan. Hal ini membantu pemilik tata kelola memantau efektivitas tata kelola data secara ketat dan membantu tim mencapai tujuan tata kelola secara efisien melalui penilaian kuantitatif.

• Knowledge Base: Berisi definisi item pemeriksaan dan item tata kelola bawaan dalam Tata Kelola Aset Data. Knowledge Base membantu personel tata kelola data dengan cepat mengidentifikasi dan memahami isu spesifik yang teridentifikasi selama tata kelola serta menyediakan informasi referensi dan panduan praktis untuk meningkatkan efisiensi.

Dokumentasi terkait

Untuk informasi lebih lanjut mengenai penggunaan item pemeriksaan selama tahap pengembangan data, lihat Diagnosis dan tata kelola isu pengembangan node.