MaxCompute：Beli dan gunakan kelompok sumber daya eksklusif untuk Data Transmission Service

Latar Belakang

Catatan Penggunaan

Sebelum membeli dan menggunakan exclusive resource group for Data Transmission Service, pastikan jaringan dan wilayah Anda memenuhi persyaratan berikut:

• Batasan jaringan: Hanya mendukung akses melalui jaringan VPC. Akses melalui internet publik tidak didukung.

• Batasan wilayah: Hanya mendukung transmisi data dalam wilayah yang sama. Transmisi data lintas wilayah tidak didukung. Anda harus membeli kelompok sumber daya di wilayah yang sama tempat tugas transmisi data Anda dijalankan.

• Untuk batasan lainnya, lihat Limits on Data Transmission Service.

Beli exclusive resource group for Data Transmission Service

1. Masuk ke MaxCompute console dan pilih wilayah di pojok kiri atas.

2. Pada panel navigasi sebelah kiri, pilih Manage Configurations > Quotas.

3. Pada halaman Quotas, klik New Quota.

   Pada halaman Purchase, untuk Specification Type, pilih Tunnel.

   Konfigurasikan parameter Tunnel Concurrency sesuai kebutuhan.

4. Setelah pembelian selesai, kembali ke konsol. Pada halaman Quotas, akan ditampilkan kelompok kuota dengan Quota Type diatur ke Data Transmission Service. Anda dapat melakukan upgrade, downgrade, atau renew kelompok kuota ini. Untuk informasi selengkapnya, lihat Upgrade and downgrade.

Gunakan exclusive resource group for Data Transmission Service

Saat menjalankan pekerjaan transmisi data atau integrasi data, Anda dapat menentukan exclusive resource group for Data Transmission Service sesuai kebutuhan bisnis untuk meningkatkan efisiensi pemrosesan data.

1. Akses proyek MaxCompute Anda menggunakan MaxCompute client (odpscmd) atau alat koneksi lainnya, lalu aktifkan exclusive resource group for Data Transmission Service.

    setproject odps.tunnel.enable.quota.route.v2=true;

   Catatan

   Pastikan kit pengembangan perangkat lunak (SDK) MaxCompute Anda versi 0.45 atau lebih baru.

2. Berikan izin untuk menggunakan fitur kuota kepada semua akun dan peran yang diperlukan, termasuk Akun Alibaba Cloud.

   1. Masuk ke MaxCompute console dan pilih wilayah di pojok kiri atas.

   2. Pada panel navigasi sebelah kiri, pilih Manage Configurations > Tenants .

   3. Pada panel navigasi sebelah kiri, pilih Manage Configurations > Tenants .

   4. Pada tab Roles, klik Add Role. Pada kotak dialog Add Role, masukkan Role Name dan Policy Content kustom, lalu klik OK.

      Konfigurasikan Policy Content sebagai berikut:

      {
          "Statement": [{
                  "Action": [
                      "odps:List",
                      "odps:Usage"],
                  "Effect": "Allow",
                  "Resource": ["acs:odps:*:regions/*/quotas/*"]}],
          "Version": "1"
      }

   5. Berikan peran tersebut kepada akun yang perlu menentukan kuota pada level pekerjaan.

      1. Berikan izin kepada Alibaba Cloud account.

         -- Tambahkan Alibaba Cloud account ke tenant dan berikan role kepada akun tersebut.
         ADD tenant USER <Aliyun$xxxx>;
         GRANT tenant role <role_name> TO USER <Aliyun$xxxx>;
         
         -- Lihat izin role atau pengguna di tenant.
         SHOW grants FOR tenant role <role_name>;
         SHOW grants FOR tenant USER <user_name>;
         SHOW principals FOR tenant [role] <role_name>;

      2. Berikan izin kepada Resource Access Management (RAM) user.

         Pada halaman Tenants, klik tab Users.

         Pada tab Users, klik Add Member. Pada kotak dialog Add Member, pilih atau tambahkan secara manual akun yang ingin Anda tetapkan perannya. Pada area Batch Set Roles, pilih peran yang akan diberikan kepada akun-akun tersebut, klik , lalu klik OK.

3. Tentukan secara manual kelompok kuota dalam SDK untuk tugas Data Transmission Service.

   -- Gunakan kelompok sumber daya bernama XXX untuk Data Transmission Service.
   final TableTunnel tunnel = new TableTunnel(odps);
   tunnel.getConfig().setQuotaName("xxx");
   TableTunnel.UploadSession up = tunnel.createUploadSession(projectName, tableName);
   
   -- Anda dapat memperoleh kelompok sumber daya yang benar-benar digunakan oleh sesi tersebut.
   up.getQuotaName();

   Pada panel navigasi sebelah kiri, pilih Manage Configurations > Quotas.

   Pada panel navigasi sebelah kiri, pilih Manage Configurations > Quotas.

   Anda dapat melihat dan menyalin QuotaName. Contohnya: ot_42854300324****_169821756****_p#ot_42854300324****_169821756****.

Lihat metrik kelompok sumber daya

Pada halaman Quotas, temukan kuota target dan klik Configure Resources pada kolom Actions.

Anda dapat melihat penggunaan kelompok sumber daya eksklusif berbasis langganan untuk Data Transmission Service saat ini.

Konfigurasi kelompok sumber daya

1. Masuk ke MaxCompute console dan pilih wilayah di pojok kiri atas.

2. Pada panel navigasi sebelah kiri, pilih Manage Configurations > Projects.

3. Pada halaman Projects, temukan proyek target dan klik Manage pada kolom Actions.

   Bagian Basic Properties menampilkan konfigurasi Data Transmission Service untuk proyek saat ini. Parameter-parameter tersebut dijelaskan sebagai berikut:

   Parameter	Description
   Default Tunnel Quota	Kelompok sumber daya Data Transmission Service default yang digunakan proyek untuk operasi baca dan tulis ketika tidak ada kuota kelompok sumber daya tertentu yang ditentukan. Nilainya biasanya Default, yang menunjukkan public Data Transmission Service resource group. Anda tidak dapat mengubah parameter ini di konsol.
   Default Tunnel Quota	Memberikan otorisasi kepada semua pengguna dan role untuk menggunakan kelompok sumber daya khusus yang dikonfigurasi guna menjalankan tugas baca dan tulis data untuk proyek tersebut. Oleh karena itu, Anda dapat menentukan kuota kelompok sumber daya khusus yang dikonfigurasi dalam SDK untuk tugas baca dan tulis data tanpa perlu otorisasi manual. Satu proyek hanya dapat dikonfigurasi dengan satu kelompok sumber daya khusus.
   Overlay Tunnel Quota	Fitur tambahan untuk kelompok sumber daya Data Transmission Service khusus yang memungkinkan Anda menggunakan kelompok sumber daya khusus dan kelompok sumber daya Default secara bersamaan. Setelah Anda mengonfigurasi kelompok sumber daya khusus yang telah dibeli, konkurensi maksimum untuk proyek meningkat menjadi jumlah total sumber daya dari public Data Transmission Service resource group dan kelompok sumber daya khusus. Fitur ini hanya tersedia di beberapa wilayah. Ketersediaan mengikuti tampilan di konsol.

   • Satu proyek hanya dapat dikaitkan dengan satu kelompok sumber daya eksklusif, tetapi beberapa proyek dapat menggunakan kelompok sumber daya eksklusif yang sama. Saat menggunakan fitur overlay, Anda harus menetapkan Default untuk kelompok kuota.

   • Untuk menggunakan operasi API open storage, Anda tetap harus menentukan kelompok sumber daya eksklusif. Format QuotaName adalah ot_42854300324****_169821756****_p#ot_42854300324****_169821756***.

4. Pada bagian Basic Properties, klik Edit untuk mengubah konfigurasi.