DataWorks:Ikhtisar Tata Kelola Aset Data

Batasan

• Edisi

  Hanya DataWorks Enterprise Edition atau edisi yang lebih tinggi yang mendukung Tata Kelola Aset Data. Untuk informasi mengenai edisi DataWorks, lihat DataWorks: Fitur berdasarkan edisi. Untuk informasi cara mengaktifkan DataWorks, lihat Panduan pembelian.

• Wilayah

  Tata Kelola Aset Data tersedia di wilayah berikut: Tiongkok (Hangzhou), Tiongkok (Shanghai), Tiongkok (Beijing), Tiongkok (Zhangjiakou), Tiongkok (Shenzhen), Tiongkok (Chengdu), Tiongkok (Hong Kong), Singapura, Jepang (Tokyo),

  Malaysia (Kuala Lumpur), Indonesia (Jakarta), Jerman (Frankfurt), AS (Silicon Valley), dan AS (Virginia).

• Izin

  • Tabel berikut menjelaskan izin setiap role dalam Tata Kelola Aset Data.

    Role	Izin	Referensi
    Administrator tata kelola data tingkat tenant	Administrator tata kelola data tingkat tenant dapat melihat laporan tata kelola, isu tata kelola, dan event pemeriksaan dari perspektif Global serta melakukan tindakan korektif.	Untuk informasi cara memberikan izin kepada pengguna, lihat bagian Mengelola role anggota tenant dalam topik Mengelola izin layanan tingkat global. Untuk informasi lebih lanjut mengenai izin administrator tata kelola data, lihat bagian Tata Kelola Data dalam topik Izin role bawaan tingkat ruang kerja.
    Administrator ruang kerja	Administrator ruang kerja dapat melihat laporan tata kelola dari perspektif Workspace View. Untuk melihat laporan tata kelola ruang kerja tertentu, Anda harus memiliki role administrator ruang kerja untuk ruang kerja tersebut.	Untuk informasi cara memberikan izin kepada pengguna, lihat bagian Menambahkan Pengguna RAM ke ruang kerja sebagai anggota dan menetapkan role kepada anggota tersebut dalam topik Mengelola izin layanan tingkat ruang kerja. Untuk informasi cara melihat laporan tata kelola, lihat bagian Melihat laporan penilaian tata kelola dalam topik Melihat hasil tata kelola data.
    Administrator tata kelola data tingkat ruang kerja	Administrator tata kelola data tingkat ruang kerja dapat melihat dan mengelola konten tata kelola data dari ruang kerja tempat role tersebut diberikan. Catatan Role ini tidak dapat melihat status tata kelola data di seluruh ruang kerja dalam suatu wilayah dari dimensi global atau mengelola operasi tata kelola global, seperti mengaktifkan item pemeriksaan di tingkat global. Untuk memberikan kemampuan kepada Pengguna Resource Access Management (RAM) agar dapat melakukan operasi tata kelola global, tetapkan role Administrator Tata Kelola Data di tingkat tenant kepada Pengguna RAM tersebut. Untuk informasi lebih lanjut, lihat Role Administrator Tata Kelola Data tingkat tenant.	Untuk informasi cara memberikan izin kepada pengguna, lihat bagian Menambahkan Pengguna RAM ke ruang kerja sebagai anggota dan menetapkan role kepada anggota tersebut dalam topik Mengelola izin layanan tingkat ruang kerja. Untuk informasi fitur yang didukung oleh role administrator tata kelola data tingkat ruang kerja, lihat bagian Tata Kelola Data dalam topik Izin role bawaan tingkat ruang kerja.
    Pengguna umum	Pengguna umum menangani isu yang terdeteksi dalam Tata Kelola Aset Data. Mereka dapat melihat event pemeriksaan dan isu tata kelola dari dimensi personal serta melakukan operasi perbaikan. Untuk memperbaiki isu yang terdeteksi di suatu ruang kerja, Anda harus ditambahkan sebagai anggota ruang kerja tersebut. Catatan Secara default, kecuali Akun Alibaba Cloud dan Pengguna RAM yang dilengkapi kebijakan AliyunDataWorksFullAccess, semua pengguna lainnya merupakan pengguna umum dalam suatu tenant.	Untuk informasi cara memberikan izin kepada pengguna, lihat bagian Menambahkan Pengguna RAM ke ruang kerja sebagai anggota dan menetapkan role kepada anggota tersebut dalam topik Mengelola izin layanan tingkat ruang kerja.

  • Hanya Akun Alibaba Cloud dan Pengguna RAM dengan kebijakan AliyunDataWorksFullAccess yang dapat menggunakan semua fitur Tata Kelola Aset Data. Untuk menggunakan semua fitur sebagai Pengguna RAM, Anda harus mengajukan izin yang diperlukan. Untuk informasi lebih lanjut, lihat bagian Memberikan izin untuk melakukan operasi di DataWorks kepada Pengguna RAM dalam topik Menyiapkan Pengguna RAM.

• Sumber daya komputasi

  Saat ini, Tata Kelola Aset Data hanya mendukung sumber daya komputasi MaxCompute, E-MapReduce (EMR), dan Hologres.

  Catatan

  • Untuk menggunakan sumber daya komputasi Hologres dalam Tata Kelola Aset Data, Anda harus terlebih dahulu mengumpulkan metadatanya dengan Data Map. Untuk informasi lebih lanjut, lihat Pengumpulan metadata.

  • Tata Kelola Aset Data hanya mendukung sumber daya komputasi Hologres di wilayah Tiongkok (Beijing), Tiongkok (Shanghai), Tiongkok (Hangzhou), dan Tiongkok (Shenzhen).

Logika tata kelola data

Tata Kelola Aset Data mendeteksi event pemeriksaan berdasarkan item pemeriksaan sebelum tugas pengembangan data diajukan dan diterapkan, serta mendeteksi isu tata kelola berdasarkan item tata kelola setelah penerapan. Hal ini memastikan penanganan menyeluruh terhadap event dan isu terkait data. Jika suatu tugas gagal dalam pemeriksaan, sebuah event akan dibuat. Event yang parah dapat menghentikan proses pengembangan berikutnya. Anda dapat melihat dan menangani event tersebut di Tata Kelola Aset Data, lalu melanjutkan pengembangan setelah tugas berhasil melewati pemeriksaan. Bagan alir berikut menggambarkan logika tata kelola data:

DataWorks menyediakan ruang kerja dalam mode standar dan mode dasar. Proses pengembangan tugas berbeda tergantung pada mode ruang kerja. Topik ini menggunakan ruang kerja dalam mode standar untuk menggambarkan proses pengembangan tugas. Untuk informasi lebih lanjut mengenai proses pengembangan dalam mode yang berbeda, lihat DataStudio (legacy).

• Jalankan pemeriksaan berdasarkan item pemeriksaan.

  Item pemeriksaan memverifikasi data terhadap aturan sebelum tugas diajukan dan diterapkan. Jika sistem mendeteksi pelanggaran, sistem akan membuat event pemeriksaan yang menghentikan proses pengembangan berikutnya. Anda dapat menyelesaikan isu tersebut agar proses pengembangan berjalan sesuai harapan.

• Jalankan pemeriksaan berdasarkan item tata kelola.

  Deteksi item tata kelola merupakan mekanisme tata kelola pasca-penerapan. Anda dapat menggunakan perspektif Global, Individual, atau Workspace View dalam Tata Kelola Aset Data untuk melihat item tata kelola yang belum terselesaikan. Personel tata kelola dapat menggunakan informasi ini untuk segera menemukan dan menyelesaikan isu, sehingga membantu tim mencapai tujuan tata kelola.

Proses tata kelola data

1. Konfigurasikan alat tata kelola.

   • Aktifkan templat rencana tata kelola dan konfigurasikan item kustom.

     Operasi	Deskripsi	Referensi
     Konfigurasikan item pemeriksaan kustom	Jika item pemeriksaan dalam templat tidak memenuhi kebutuhan bisnis Anda, Anda dapat mengonfigurasi item pemeriksaan kustom. Buat item pemeriksaan untuk ekstensi kustom yang telah terdaftar. DataWorks juga memungkinkan Anda membuat item pemeriksaan di Tata Kelola Aset Data untuk ekstensi kustom. Setelah Anda membuat item pemeriksaan tersebut, Tata Kelola Aset Data akan mendeteksi event pemeriksaan yang dipicu oleh ekstensi kustom tersebut. Nonaktifkan item pemeriksaan. Jika suatu item pemeriksaan dalam templat rencana tata kelola tidak diperlukan untuk suatu ruang kerja, Anda dapat menonaktifkannya. Setelah item pemeriksaan dinonaktifkan, Tata Kelola Aset Data tidak lagi mendeteksi event pemeriksaannya di ruang kerja tersebut.	Mengonfigurasi item pemeriksaan
     Konfigurasikan item tata kelola kustom	Jika suatu item tata kelola dalam templat rencana tata kelola tidak diperlukan untuk suatu ruang kerja, Anda dapat membuat aturan untuk menonaktifkannya. Setelah item tata kelola dinonaktifkan, Tata Kelola Aset Data tidak lagi mendeteksi isu tata kelola berdasarkan item tersebut di ruang kerja tersebut. Isu tata kelola yang terdeteksi tidak akan ditampilkan di tab Governance Issue. Catatan Anda hanya dapat menonaktifkan item tata kelola opsional. Anda tidak dapat menonaktifkan item tata kelola wajib atau membuat item tata kelola baru.	Mengonfigurasi item tata kelola

   • Opsional. Konfigurasikan unit tata kelola.

     Anda dapat melakukan tata kelola data terhadap beberapa ruang kerja secara terpusat dengan membuat unit tata kelola. Dengan demikian, Anda dapat melihat statistik agregat mengenai skor kesehatan, isu tata kelola, dan event pemeriksaan untuk ruang kerja dalam unit tata kelola tersebut. Untuk informasi lebih lanjut, lihat Mengonfigurasi unit tata kelola.

   • Opsional. Konfigurasikan metode notifikasi isu.

     Agar sistem memberi notifikasi kepada personel tertentu mengenai isu yang terdeteksi melalui pesan sistem, email, pesan grup DingTalk, atau URL webhook, konfigurasikan metode notifikasi isu. Hal ini memastikan bahwa personel dapat segera melihat dan menangani isu tersebut. Untuk informasi lebih lanjut, lihat Pengaturan alert.

2. Mulai pemeriksaan dan tangani isu tata kelola yang terdeteksi.

   • Periksa data terhadap pelanggaran item pemeriksaan sebelum data diajukan dan diterapkan.

     Sebelum data diajukan dan diterapkan, DataWorks memeriksanya terhadap item pemeriksaan yang telah dikonfigurasi. Jika data melanggar item pemeriksaan apa pun, event pemeriksaan akan dibuat. Anda kemudian dapat melihat dan menangani event tersebut. Untuk informasi lebih lanjut, lihat Menangani event pemeriksaan.

   • Jalankan pemeriksaan setelah penerapan tugas.

     Setelah data diajukan dan diterapkan, DataWorks mendeteksi isu tata kelola berdasarkan item tata kelola yang telah dikonfigurasi. Anda kemudian dapat melihat dan menangani isu tersebut. Untuk informasi lebih lanjut, lihat Menangani event pemeriksaan.

   • Jalankan pemeriksaan asset 360.

     Anda dapat menggunakan fitur asset 360 untuk mendeteksi, melihat, dan menangani isu tata kelola pada tugas dan tabel tertentu. Untuk informasi lebih lanjut, lihat Asset 360.

   • Lakukan tata kelola otomatis terhadap tampilan yang di-materialisasi.

     Tata Kelola Aset Data mendukung tampilan yang di-materialisasi dengan tata kelola otomatis dan rekomendasi cerdas. Ini merupakan solusi cerdas dan otomatis untuk tugas komputasi data besar yang sering menangani banyak subquery serupa. Untuk informasi lebih lanjut, lihat Tampilan yang di-materialisasi.

   Jika isu yang tidak valid terdeteksi, Anda dapat menambahkannya ke daftar putih atau meng-un-deploy tugas atau tabel terkait. Untuk informasi lebih lanjut, lihat Menambahkan isu ke daftar putih dan Un-deployment yang aman.

3. Pilih dimensi analisis.

   • Berdasarkan skenario penggunaan: DataWorks menyediakan berbagai dimensi seperti produksi data, penggunaan data, dan manajemen data untuk membantu Anda menganalisis efektivitas tata kelola dan mengelola data secara efisien.

   • Berdasarkan penggunaan sumber daya secara rasional: DataWorks menyediakan statistik mengenai konsumsi sumber daya, status eksekusi tugas, jumlah dan penyimpanan tabel MaxCompute, serta ikhtisar dan rincian penggunaan sumber daya. Pengembang dan administrator data dapat menganalisis penggunaan sumber daya ruang kerja secara keseluruhan dan mengoptimalkan alokasi sumber daya berdasarkan statistik tersebut. Untuk informasi lebih lanjut, lihat Analisis aset.

4. Lihat hasil tata kelola.

   Setelah Anda menangani isu tata kelola, Anda dapat membuka halaman Overview > Workbench untuk melihat hasil tata kelola dari berbagai perspektif. Dengan menganalisis hasil tersebut, Anda dapat segera mengidentifikasi dimensi dan kategori yang memiliki isu terbanyak, sehingga membantu Anda mendorong penyelesaian dan mencapai tujuan tata kelola.

   Tata Kelola Aset Data menghitung skor kesehatan berdasarkan item tata kelola menggunakan model penilaian kesehatan. Anda dapat melihat skor kesehatan pada laporan tata kelola dan papan peringkat untuk memahami hasil tata kelola. Skor kesehatan yang lebih tinggi menunjukkan efektivitas tata kelola yang lebih baik. Untuk informasi lebih lanjut, lihat bagian Penilaian kuantitatif: skor kesehatan dalam topik Ikhtisar.

Penilaian kuantitatif: skor kesehatan

Skor kesehatan adalah skor gabungan yang mencerminkan kondisi aset data Anda. Sistem menghitungnya dengan menerapkan teknik pemrosesan data dan pembelajaran mesin pada metadata seperti perilaku pengguna, karakteristik data, dan properti tugas di seluruh produksi, distribusi, dan manajemen data. Sistem skor kesehatan dibangun di atas lima domain utama: penyimpanan, komputasi, R&D, kualitas, dan keamanan, dengan lima metrik skor kesehatan yang sesuai. Halaman skor kesehatan menampilkan grafik radar dengan skor tata kelola untuk lima dimensi: R&D, penyimpanan, komputasi, kualitas, dan keamanan. Halaman ini juga menyediakan informasi tren bulan ke bulan.

Skor kesehatan berkisar antara 0 hingga 100. Skor yang lebih tinggi menunjukkan aset data yang lebih sehat. Hal ini membantu Anda menggunakan data secara aman, efisien, dan andal sekaligus memastikan produksi data dan operasi bisnis berjalan lancar. Tata Kelola Aset Data menggunakan model penilaian kesehatan bawaan untuk melakukan penilaian kuantitatif terhadap efektivitas tata kelola dan menghasilkan skor kesehatan keseluruhan serta skor untuk setiap dimensi tata kelola. Tabel berikut menjelaskan tingkat penilaian dan rentang skornya.

• Sangat Baik: [90, 100]

• Baik: [75, 90)

• Cukup: [60, 75)

• Perlu Perbaikan: [30, 60)

• Buruk: [0, 30)

Istilah

• Check item: Mekanisme tata kelola proaktif yang diterapkan selama alur kerja produksi data. Mekanisme ini melakukan pemeriksaan awal pada tahap kritis, seperti eksekusi dan penerapan tugas, untuk mengidentifikasi potensi isu seperti pemindaian tabel penuh atau ketergantungan penjadwalan yang hilang. Jika sistem mendeteksi item yang tidak sesuai, sistem akan membuat event pemeriksaan dan secara otomatis menghentikan proses tersebut. Hal ini menegakkan standarisasi dan menormalisasi pemrosesan data.

• Governance Item: Item tata kelola mendefinisikan potensi isu atau area untuk optimalisasi yang diidentifikasi selama tata kelola data. Item ini mencakup bidang seperti standar pengembangan, kualitas data, kepatuhan keamanan, dan pemanfaatan sumber daya. Item tata kelola dibagi menjadi item wajib dan opsional. Item wajib diaktifkan secara default dan tidak dapat diubah, sedangkan item opsional dapat diaktifkan sesuai kebutuhan. Contohnya termasuk Task running time is too long, Continuous error nodes, dan No one visits leaf nodes.

• Governance Issue: Isu yang terdeteksi oleh pemindaian item tata kelola yang memerlukan penyelesaian.

• Governance unit: Unit tata kelola terdiri dari satu atau beberapa ruang kerja. Anda dapat melihat statistik mengenai skor kesehatan keseluruhan, isu tata kelola, dan event pemeriksaan dari ruang kerja dalam unit tata kelola tersebut.

• Governance plan: Tata Kelola Aset Data menyediakan templat rencana tata kelola untuk berbagai skenario, yang dirancang untuk mencapai tujuan tertentu dalam periode spesifik. Templat rencana tata kelola membantu Anda segera mengidentifikasi item tata kelola dan item pemeriksaan yang relevan serta menemukan peluang optimalisasi. Hal ini membantu pemilik tata kelola melacak efektivitas dan membantu tim mencapai tujuan tata kelola secara efisien melalui penilaian kuantitatif.

• Knowledge Base: Berisi definisi item pemeriksaan dan item tata kelola bawaan dalam Tata Kelola Aset Data. Knowledge Base membantu personel tata kelola segera mengidentifikasi dan memahami isu spesifik serta menyediakan informasi referensi dan panduan praktis untuk meningkatkan efisiensi.

Dokumentasi terkait

Untuk informasi lebih lanjut mengenai penggunaan item pemeriksaan selama pengembangan data, lihat Mendiagnosis dan mengelola isu pengembangan node.