Mengaitkan proyek MaxCompute sebagai sumber daya komputasi - DataWorks

Untuk mengembangkan task MaxCompute di DataWorks, kaitkan proyek MaxCompute Anda dengan ruang kerja DataWorks sebagai sumber daya komputasi untuk sinkronisasi data, pengembangan, dan analisis.

Batasan

Batasan wilayah: Tiongkok (Hangzhou), Tiongkok (Shanghai), Tiongkok (Beijing), Tiongkok (Shenzhen), Tiongkok (Chengdu), Tiongkok (Hong Kong), Jepang (Tokyo), Singapura, Malaysia (Kuala Lumpur), Indonesia (Jakarta), Jerman (Frankfurt), Inggris (London), AS (Silicon Valley), dan AS (Virginia).
Proyek MaxCompute dan ruang kerja DataWorks harus berada di wilayah yang sama dan dalam Akun Alibaba Cloud yang sama.

Izin:

Produk	Operator	Izin
DataWorks	Akun Alibaba Cloud	Tidak diperlukan izin tambahan.
DataWorks	RAM user/RAM role	Hanya anggota ruang kerja dengan peran O&M atau Workspace Administrator, atau anggota dengan izin `AliyunDataWorksFullAccess`, yang dapat membuat sumber daya komputasi. Anda dapat memberikan izin kepada anggota ruang kerja.
MaxCompute	RAM user/RAM role	Untuk mengaitkan sumber daya komputasi: Anda harus memiliki izin odps:ListProjects untuk MaxCompute dan izin Super_Administrator untuk proyek MaxCompute target. Persyaratan identitas akses default: Identitas ini harus memiliki peran admin atau super_administrator untuk proyek MaxCompute. Setelah dikaitkan, platform memberikan identitas ini peran Role_Project_Scheduler untuk proyek produksi.

Identitas akses default untuk lingkungan produksi memiliki seluruh data produksi. Akun lain harus meminta akses melalui Security Center.

Prasyarat

MaxCompute telah diaktifkan dan proyek telah dibuat di wilayah yang sama dengan ruang kerja DataWorks Anda.
DataWorks ruang kerja telah dibuat, dan Pengguna RAM Anda memiliki peran Workspace Administrator.

Catatan
DataWorks mendukung mode Simple dan mode Standard. Pahami perbedaan antara mode Simple dan mode Standard sebelum membuat ruang kerja.
Kelompok sumber daya telah dikaitkan dengan ruang kerja dan konektivitas jaringan telah diverifikasi.
- Jika Anda menggunakan kelompok sumber daya serverless, pastikan konektivitas jaringan antara sumber daya komputasi MaxCompute dan kelompok sumber daya serverless.
- Jika Anda menggunakan kelompok sumber daya eksklusif lama, pastikan konektivitas jaringan antara sumber daya komputasi MaxCompute dan kelompok sumber daya eksklusif untuk penjadwalan.

Data Studio Baru: Mengaitkan sumber daya komputasi

Kaitkan sumber daya komputasi MaxCompute dengan ruang kerja yang Use Data Studio (New Version).

Buka halaman sumber daya komputasi

Login ke Konsol DataWorks dan beralih ke wilayah target. Di bilah navigasi kiri, klik More > Management Center. Dari daftar drop-down, pilih ruang kerja yang sesuai dan klik Go to Management Center.
Di panel navigasi sisi kiri, klik Computing Resources untuk membuka halaman Compute resource.

Mengaitkan sumber daya komputasi MaxCompute

Di halaman Compute resource, kaitkan sumber daya komputasi MaxCompute.

Pilih jenis sumber daya komputasi.
1. Klik Associate Computing Resources, lalu halaman Associate Computing Resources akan terbuka.
2. Di halaman Associate Computing Resources, pilih MaxCompute sebagai jenis sumber daya komputasi untuk membuka halaman konfigurasi Associate MaxCompute Computing Resource.

Konfigurasikan sumber daya komputasi MaxCompute.

Di halaman konfigurasi Associate MaxCompute Computing Resource, konfigurasikan parameter berikut.

Parameter	Deskripsi
MaxCompute Project	Pilih proyek MaxCompute yang akan dikaitkan. Anda dapat membuat proyek MaxCompute internal atau membuat proyek MaxCompute eksternal, lalu pilih proyek baru tersebut. Catatan Dalam mode Standard, pilih proyek MaxCompute terpisah untuk lingkungan produksi dan pengembangan. Item yang dapat ditagih MaxCompute dan metode penagihan. Jika proyek target tidak tercantum, berikan peran Super_Administrator untuk proyek tersebut kepada akun saat ini.
Default Access Identity	Identitas yang digunakan untuk mengakses proyek MaxCompute dari ruang kerja ini. Lingkungan pengembangan: Hanya identitas Executor yang didukung. Lingkungan produksi: Identitas Alibaba Cloud Account, Alibaba Cloud RAM Sub-account, dan RAM role didukung. Catatan Hanya Akun Alibaba Cloud atau pihak yang berwenang dengan izin AdministratorAccess yang dapat memilih semua identitas akses. Security Center untuk lingkungan produksi memiliki seluruh data produksi. Akun lain harus meminta akses melalui Security Center. Kontrol akses data MaxCompute dan Approval Center.
Endpoint	Titik akhir untuk mengakses proyek MaxCompute, termasuk titik akhir layanan dan titik akhir Tunnel untuk transfer data. Auto Fit: DataWorks secara otomatis menyesuaikan konfigurasi Anda. Direkomendasikan. Custom Configuration: Konfigurasikan secara manual endpoint MaxCompute dan Tunnel, yang berbeda-beda berdasarkan wilayah.
Computing Resource Instance Name	Nama unik untuk sumber daya komputasi, digunakan pada waktu proses untuk memilihnya dalam task.

Uji konektivitas.

Pilih kelompok sumber daya untuk menjalankan task MaxCompute dan klik Test Connectivity untuk memverifikasi akses. Solusi koneksi jaringan.

Catatan
Jika tidak tersedia kelompok sumber daya, tambahkan dan kaitkan kelompok sumber daya serverless terlebih dahulu, lalu uji konektivitas di halaman Computing Resources.
Klik Confirm untuk menyelesaikan pengaitan.
Catatan
- Setelah dikaitkan, sumber data MaxCompute dengan nama yang sama akan dibuat secara otomatis di halaman Data Sources.
- Setelah dikaitkan, platform memberikan otorisasi kepada identitas akses dengan menambahkannya ke proyek MaxCompute dengan izin yang diperlukan. Pengujian konektivitas mungkin gagal dengan error izin hingga otorisasi selesai. Jika hal ini terjadi, simpan sumber daya tersebut dan coba lagi setelah beberapa saat.

Data Studio Lama: Mengaitkan sumber daya komputasi

Kaitkan sumber daya komputasi MaxCompute dengan ruang kerja yang tidak Use Data Studio (New Version).

Buka halaman sumber daya komputasi

Login ke Konsol DataWorks. Di wilayah target, klik Data Development and O&M > Data Development di panel navigasi sisi kiri. Pilih ruang kerja dari daftar drop-down dan klik Go to Data Development.
Di panel navigasi sisi kiri, klik ikon untuk membuka halaman Computing Resources.

Mengaitkan sumber daya komputasi MaxCompute

Di halaman sumber daya komputasi, kaitkan sumber daya komputasi MaxCompute.

Pilih jenis sumber daya komputasi.
1. Klik Create Computing Resource untuk membuka halaman Create Computing Resource.
2. Di halaman Create Computing Resource, pilih MaxCompute sebagai jenis sumber daya komputasi untuk membuka halaman konfigurasi Create Computing Resource.

Konfigurasikan sumber daya komputasi MaxCompute.

Di halaman konfigurasi Create Computing Resource, konfigurasikan parameter berikut.

Parameter	Deskripsi
Authentication Method	Sumber daya komputasi baru hanya mendukung autentikasi Akun Alibaba Cloud atau RAM role.
Alibaba Cloud Account	Hanya proyek MaxCompute di bawah Current Alibaba Cloud Account yang dapat dikaitkan dengan ruang kerja ini.
MaxCompute Project Name	Pilih proyek MaxCompute yang akan dikaitkan. Jika tidak tersedia, buat proyek MaxCompute. Catatan Dalam mode Standard, pilih proyek MaxCompute terpisah untuk lingkungan produksi dan pengembangan. Item yang dapat ditagih MaxCompute dan metode penagihan. Jika proyek target tidak tercantum, berikan peran Super_Administrator untuk proyek tersebut kepada akun saat ini.
Region	Wilayah proyek MaxCompute. Harus sesuai dengan wilayah ruang kerja.
Default Access Identity	Identitas yang digunakan untuk mengakses sumber daya komputasi dari ruang kerja ini. Lingkungan pengembangan: Hanya identitas Executor yang didukung. Lingkungan produksi: Akun Alibaba Cloud, RAM user, dan RAM role didukung. Catatan Hanya Akun Alibaba Cloud atau pihak yang berwenang dengan izin AdministratorAccess yang dapat memilih semua identitas akses. Security Center untuk lingkungan produksi memiliki seluruh data produksi. Akun lain harus meminta akses melalui Security Center. Kontrol akses data MaxCompute dan Approval Center.
Endpoint	Titik akhir untuk mengakses proyek MaxCompute, termasuk titik akhir layanan dan titik akhir Tunnel untuk transfer data. Auto Fit: DataWorks secara otomatis menyesuaikan konfigurasi Anda. Direkomendasikan. Custom Configuration: Konfigurasikan secara manual endpoint MaxCompute dan Tunnel, yang berbeda-beda berdasarkan wilayah.

Uji konektivitas.

Pilih kelompok sumber daya untuk menjalankan task MaxCompute dan klik Test Connectivity untuk memverifikasi akses. Solusi koneksi jaringan.

Catatan
Jika tidak tersedia kelompok sumber daya, tambahkan dan kaitkan kelompok sumber daya serverless terlebih dahulu, lalu uji konektivitas di halaman Computing Resources.
Klik Create and Associate Computing Resource with DataStudio untuk menyelesaikan pengaitan.
Catatan
- Setelah dikaitkan, sumber data MaxCompute dengan nama yang sama akan dibuat secara otomatis di halaman Data Sources.
- Setelah dikaitkan, platform memberikan otorisasi kepada identitas akses dengan menambahkannya ke proyek MaxCompute dengan izin yang diperlukan. Pengujian konektivitas mungkin gagal dengan error izin hingga otorisasi selesai. Jika hal ini terjadi, simpan sumber daya tersebut dan coba lagi setelah beberapa saat.

Langkah selanjutnya

Setelah dikaitkan, DataWorks secara otomatis membuat sumber data MaxCompute di ruang kerja. Gunakan sumber data tersebut di Data Integration dan di node database (Data Studio Baru) atau node database (Data Studio Lama).

FAQ

Masalah: Saat menjalankan task pada sumber daya komputasi MaxCompute, muncul error connect timed out, the possible reason is that the endpoint `http://service.odps.aliyun.com/api` is wrong, please check your endpoint.

Solusi: Verifikasi konfigurasi endpoint. Gunakan endpoint VPC untuk wilayah sumber daya tersebut.
Masalah: Saat menguji konektivitas, muncul error You have NO privilege 'odps:Read' on {acs:odps:*:projects/xxx}.

Solusi: Periksa status proyek MaxCompute. Jika proyek dalam status frozen atau ditangguhkan, Restore di Konsol MaxCompute.