Konsol DataWorks menyediakan konfigurasi lingkungan terpusat dan manajemen resource pada dua tingkat: global (peran dan aturan peringatan di seluruh tenant) dan ruang kerja (resource komputasi, sumber data, dan anggota untuk setiap proyek).
Konsep inti dan arsitektur sistem
Pahami arsitektur inti dan hubungan entitas dalam DataWorks sebelum memulai.
Konsep inti: Ruang Kerja
Ruang kerja adalah unit logis dasar dalam DataWorks untuk manajemen proyek, kontrol izin, dan isolasi resource. Semua aktivitas—seperti pengembangan data, operasi tugas, dan manajemen anggota—dilakukan dalam suatu ruang kerja.
-
Isolasi: Ruang kerja menyediakan isolasi kuat. Node, tugas, resource, dan anggota di ruang kerja yang berbeda sepenuhnya independen.
-
Kontainer: Ruang kerja bertindak sebagai kontainer yang menampung modul fungsional seperti Data Studio dan Data Integration, serta mengaitkan dengan entitas eksternal seperti sumber data, resource komputasi, dan kelompok sumber daya.
Arsitektur dan hubungan entitas
Gambar berikut menunjukkan dependensi antar entitas inti DataWorks.
-
Ruang kerja: Unit minimum untuk semua operasi. Modul fungsional seperti Data Studio, Data Integration, dan Operation Center beroperasi dalam ruang kerja tertentu.
-
Kelompok sumber daya:
CatatanKelompok sumber daya dalam DataWorks, yang menyediakan resource komputasi untuk menjalankan tugas, merupakan paket resource komputasi yang dibeli secara terpisah. Ini berbeda dari kelompok sumber daya dalam Akun Alibaba Cloud Anda, yang digunakan untuk isolasi resource dan manajemen izin.
-
Definisi: Entitas yang menyediakan resource komputasi (CPU dan memori) untuk eksekusi tugas. Kelompok sumber daya ini ada secara independen dari ruang kerja.
-
Hubungan: Asosiasi wajib. Seperti ditunjukkan di sisi kanan gambar, kelompok sumber daya harus dikaitkan dengan satu atau beberapa ruang kerja agar tugas Data Integration dan tugas Data Studio yang dijadwalkan secara berkala dalam ruang kerja tersebut dapat memperoleh resource komputasi saat runtime.
-
-
Resource komputasi:
-
Definisi: Entitas yang menyediakan lingkungan penguraian sintaks, kompilasi, dan eksekusi untuk modul Data Studio. Contohnya termasuk MaxCompute, Hologres, dan EMR.
-
Hubungan: Dependensi pengembangan. Seperti ditunjukkan oleh panah input ke modul Data Studio pada gambar, Anda harus mengaitkan resource komputasi dengan ruang kerja agar developer dapat menulis, men-debug, dan mengirimkan kode—seperti SQL dan Spark—dalam modul Data Studio.
-
-
Sumber data:
-
Definisi: Informasi koneksi untuk mengakses penyimpanan data eksternal, seperti MySQL, Oracle, dan OSS.
-
Hubungan: Dependensi integrasi. Seperti ditunjukkan oleh panah input ke modul Data Integration pada gambar, sumber dan sink dari tugas Data Integration bergantung pada sumber data yang telah dikonfigurasi sebelumnya dalam ruang kerja.
-
-
Gambar kustom:
-
Definisi: Lingkungan terpaket yang berisi sistem operasi tertentu, lingkungan runtime, dan pustaka pihak ketiga.
-
Hubungan: Kaitkan sesuai kebutuhan. Seperti ditunjukkan di sisi kiri gambar, ketika lingkungan pengembangan pribadi (Studio) atau jenis node Data Studio tertentu (seperti PyODPS) memerlukan dependensi di luar lingkungan standar—misalnya versi spesifik pustaka Python—Anda dapat mengaitkan gambar kustom sesuai kebutuhan. Ini merupakan fitur lanjutan.
-
-
Layanan global lintas ruang kerja:
-
Seperti ditunjukkan di bagian atas gambar, modul seperti Data Governance dan Data Map beroperasi di atas tingkat ruang kerja, menyediakan tampilan data global dan kemampuan manajemen di tingkat tenant. Sistem izin mereka independen dari ruang kerja individu.
-
Catatan
-
Kontrol izin: Jika Anda tidak dapat melihat atau menggunakan fitur tertentu, hubungi pemilik Akun Alibaba Cloud atau administrator untuk memverifikasi bahwa Anda memiliki izin yang diperlukan. Untuk informasi lebih lanjut, lihat Mengelola izin anggota.
-
Isolasi wilayah: Ruang kerja dan resource dalam DataWorks diisolasi berdasarkan wilayah. Sebelum melakukan operasi apa pun, pastikan Anda telah memilih wilayah yang benar di bilah navigasi atas konsol.
Alur kerja memulai
Jika Anda mengonfigurasi DataWorks untuk pertama kalinya, ikuti alur kerja ini untuk menyiapkan lingkungan yang lengkap dan berfungsi.
Pastikan Anda menggunakan Akun Alibaba Cloud atau Pengguna RAM yang memiliki kebijakan AliyunDataWorksFullAccess yang dilampirkan. Jika tidak, mintalah administrator Anda untuk memberikan izin kepada Pengguna RAM.
Langkah 1: Buat ruang kerja
Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah target. Di panel navigasi kiri, klik Workspace, lalu klik Create Workspace. Pilih mode ruang kerja sesuai kebutuhan Anda. Kami menyarankan Anda menggunakan Standard Mode untuk mendukung isolasi lengkap antara lingkungan pengembangan, pengujian, dan produksi.
Untuk informasi lebih lanjut, lihat Buat ruang kerja.
Langkah 2: Konfigurasikan dan kaitkan kelompok sumber daya
-
Buat atau beli kelompok sumber daya: Di panel navigasi kiri konsol, buka daftar Resource Group, lalu beli kelompok sumber daya yang sesuai dengan kebutuhan workload Anda (misalnya, serverless resource group).
-
Kaitkan dengan ruang kerja: Kaitkan kelompok sumber daya yang telah dibeli dengan ruang kerja Anda. Langkah ini merupakan prasyarat agar Data Integration, penjadwalan tugas, DataService Studio, dan fitur inti lainnya dapat berfungsi dengan baik.
Di halaman Resource Groups, klik Create Resource Group untuk membuat kelompok sumber daya, lalu klik Bind Workspace di kolom Actions kelompok sumber daya target.
Langkah 3: Tambahkan anggota ke ruang kerja
-
Buka daftar ruang kerja dan klik Details di kolom Actions ruang kerja target untuk membuka halaman detail ruang kerja.
-
Di halaman ini, tambahkan anggota tim proyek (Pengguna RAM) dan berikan peran tingkat ruang kerja yang sesuai (seperti Workspace Administrator, developer, atau operator) untuk memungkinkan pengembangan kolaboratif dan kontrol izin.
Untuk informasi lebih lanjut, lihat Tambahkan anggota ke ruang kerja.
Di panel navigasi kiri, klik Workspace Members and Roles, klik Add Member, pilih akun dari daftar Accounts to Add untuk memindahkannya ke daftar Added Accounts, pilih peran yang diinginkan (seperti Workspace Manager) di bagian Batch Set Roles, lalu klik OK.
Langkah 4: Kaitkan resource komputasi
Buka daftar Computing Resource di detail ruang kerja, lalu kaitkan instans resource komputasi yang sudah ada (seperti proyek MaxCompute) dengan ruang kerja saat ini. Langkah ini merupakan prasyarat untuk pengembangan data.
Langkah 5: Tambahkan sumber data
Buka Data Sources di detail ruang kerja, klik Add Data Source, konfigurasikan informasi koneksi database sumber atau tujuan untuk sinkronisasi data, lalu uji konektivitas jaringan.
Setelah menyelesaikan lima langkah ini, ruang kerja DataWorks Anda siap untuk pengembangan data dan eksekusi tugas.
Ikhtisar fitur manajemen
Ikhtisar dan navigasi
Panel navigasi kiri menyediakan akses ke semua fitur manajemen, termasuk daftar ruang kerja, daftar kelompok sumber daya, manajemen gambar, serta resource dan layanan yang telah dibeli. Masuk ke Konsol DataWorks. Halaman Ikhtisar ditampilkan secara default, menampilkan skenario utama, ruang kerja yang sering digunakan, pembaruan produk, dan tautan cepat.
Konfigurasi tingkat global
Konfigurasi ini berlaku di tingkat tenant dan berlaku untuk semua ruang kerja di wilayah saat ini.
-
Navigasi ke di panel navigasi, atau klik tombol manajemen di kolom Actions daftar ruang kerja, untuk membuka Administration.
-
Lihat pengaturan tingkat tenant untuk Alerts, Tenant Members and Roles, dan Extension.
Fitur
Deskripsi dan operasi utama
Konfigurasi peringatan
Lihat dan konfigurasikan kontak peringatan serta tetapkan batas peringatan untuk DataWorks.
• Resource peringatan: Lihat penggunaan resource peringatan (SMS dan telepon) dan tetapkan batas harian peringatan. Peringatan akan berhenti setelah mencapai batas.
• Kontak peringatan: Konfigurasikan kontak yang menerima peringatan tugas. Anda dapat menyinkronkan kontak dari RAM atau menambahkannya secara manual. Kontak harus diaktifkan sebelum berlaku.Untuk informasi lebih lanjut, lihat Lihat dan konfigurasikan kontak peringatan.
Anggota dan peran tenant
• Anggota tenant: Konfigurasikan anggota yang memiliki izin pada modul global seperti Data Security Guard dan Data Map.
• Peran tenant: Lihat atau sesuaikan peran global dan izinnya.Untuk informasi lebih lanjut, lihat Kontrol izin untuk layanan global.
Ekstensi
Aktifkan atau konfigurasikan aplikasi ekstensi yang disediakan oleh Open Platform untuk menerapkan verifikasi dan kontrol atas alur kerja pengembangan dan operasi.
Untuk informasi lebih lanjut, lihat Ekstensi.
Konfigurasi detail ruang kerja
Konfigurasi ini hanya berlaku di ruang kerja saat ini.
|
Fitur |
Deskripsi dan operasi utama |
|
Pengaturan ruang kerja |
Kelola properti dasar ruang kerja dan pengaturan keamanan (seperti apakah mengizinkan pengunduhan hasil Untuk informasi lebih lanjut, lihat Konfigurasikan ruang kerja. |
|
Sumber data |
Kelola koneksi sumber dan tujuan yang digunakan untuk sinkronisasi data di ruang kerja saat ini. Untuk informasi lebih lanjut, lihat Manajemen sumber data. |
|
Computing Resource |
Kaitkan dan kelola resource komputasi untuk pengembangan data, seperti MaxCompute, Hologres, dan AnalyticDB for MySQL. Untuk informasi lebih lanjut, lihat Manajemen resource komputasi. |
|
Manajemen kluster |
Daftarkan dan kelola kluster CDH/CDP atau EMR yang dikelola sendiri, serta konfigurasikan file autentikasi dan hubungan pemetaan akun. Fitur ini hanya terlihat untuk ruang kerja yang tidak menggunakan Data Studio baru. |
|
Workspace Members and Roles |
Lihat izin peran preset, buat peran kustom, dan konfigurasikan izin fitur serta pemetaan peran ke resource komputasi. Anda juga dapat menambahkan atau menghapus anggota ruang kerja dan menetapkan peran. Untuk informasi lebih lanjut, lihat Kelola izin pada layanan tingkat ruang kerja. |
Manajemen ruang kerja
Di panel navigasi kiri, klik Workspace untuk melihat semua ruang kerja di wilayah yang ditentukan. Anda dapat mengelola ruang kerja yang telah Anda ikuti atau membuat yang baru.
Pengguna RAM hanya dapat melihat ruang kerja yang telah mereka ikuti. Untuk melihat ruang kerja, Pengguna RAM harus ditambahkan sebagai anggota ruang kerja. Untuk informasi lebih lanjut, lihat Tambahkan anggota ke ruang kerja.
|
Area |
Fitur |
Deskripsi |
Referensi |
|
1 |
Select a region |
Alihkan wilayah DataWorks. Wilayah berbeda menampilkan daftar ruang kerja yang berbeda. |
- |
|
2 |
Create a workspace |
Buat ruang kerja DataWorks baru. |
|
|
3 |
View basic workspace information |
Lihat informasi dasar ruang kerja seperti mode dan administrator:
|
|
|
4 |
Workspace operations |
Lihat metrik utama, navigasi cepat ke modul, atau lakukan operasi ruang kerja.
|
|
|
5 |
Version upgrade |
Tingkatkan edisi DataWorks saat ini.
|
Untuk informasi lebih lanjut tentang perbedaan antar edisi, lihat DataWorks: Features by edition. |
|
Purchase an exclusive resource group |
Anda dapat membeli serverless resource group. Setelah pembelian, klik Resource Group di panel navigasi kiri untuk melihat detail kelompok sumber daya. |
AI dan Agen
Grup menu AI di panel navigasi kiri menyediakan akses terpusat ke kemampuan AI dan Agen.
|
Fitur |
Deskripsi dan operasi utama |
|
Data Agent |
Antarmuka percakapan agen AI dengan DataWorks Skills bawaan yang mencakup skenario Data Integration, pengembangan data, Data Governance, dan Data Security. Klik untuk membuka halaman percakapan Data Agent. Untuk informasi lebih lanjut, lihat New Data Agent. |
|
AI Assistant Service |
AI Assistant Service mendukung percakapan langsung melalui konsol DataWorks. Layanan ini juga terintegrasi dengan platform IM seperti DingTalk dan Lark, memungkinkan analisis peringatan, diagnostik tugas, modifikasi kode, operasi tugas, dan tata kelola data melalui bahasa alami. Untuk informasi lebih lanjut, lihat AI assistant service. |
|
Large model service |
Sebarkan dan panggil model besar secara efisien. Anda dapat menyebarkan model menggunakan serverless resource group DataWorks dan memanggilnya langsung dalam tugas Data Integration dan pengembangan data. Untuk informasi lebih lanjut, lihat Manage large model services. |
|
Seat management |
Kelola alokasi dan penggunaan kursi Data Agent dari tab Seat Management di halaman pengaturan Data Agent. Untuk informasi lebih lanjut, lihat Seat management. |
Daftar kelompok sumber daya
Di panel navigasi kiri, klik Resource Group. Anda dapat membeli resource atau melihat detail dan mengelola resource yang telah dibeli di wilayah yang sesuai.
|
Area |
Fitur |
Deskripsi |
Referensi |
|
1 |
Create a resource group |
Buat kelompok sumber daya tanpa server. |
|
|
2 |
View basic resource group information |
Lihat informasi dasar kelompok sumber daya seperti status berjalan, waktu kedaluwarsa, dan utilisasi.
|
|
|
3 |
|||
|
4 |
Resource group operations |
Lihat informasi detail kelompok sumber daya dan lakukan operasi modifikasi.
Catatan
Proses modifikasi kelompok sumber daya memerlukan waktu. Tunggu hingga proses selesai. |
Manajemen gambar
Di panel navigasi kiri, klik Image Management. Anda dapat melihat gambar resmi DataWorks. Jika tugas pada serverless resource group memerlukan lingkungan pengembangan tertentu—seperti dependensi pustaka pihak ketiga—buat gambar kustom yang mengintegrasikan paket dan dependensi yang diperlukan, lalu tentukan serverless resource group sebagai resource eksekusi dan gambar sebagai lingkungan runtime saat menjalankan tugas. Untuk informasi lebih lanjut, lihat Custom image.
Resource dan layanan yang telah dibeli
Di panel navigasi kiri, klik Purchased Resources and Services. Lihat detail layanan DataWorks dan kelompok sumber daya langganan serta bayar sesuai penggunaan yang telah dibeli, lihat Tagihan dan aturan penagihan, atau lakukan operasi seperti perpanjangan, Peningkatan, menurunkan spesifikasi, dan pembatalan langganan. Untuk informasi lebih lanjut, lihat Lihat detail tagihan dan Ikhtisar.
untuk melakukan operasi seperti scale-up, scale-down, renewal, unsubscription, quota management, billing type conversion, dan modify the scheduling concurrency limit pada kelompok sumber daya.