Untuk menjalankan dan menjadwalkan tugas, Anda dapat membeli grup sumber daya eksklusif untuk penjadwalan dengan spesifikasi yang sesuai kebutuhan bisnis Anda. Setelah pembelian, konfigurasikan pengaturan jaringan dan daftar putih sebelum menggunakannya. Topik ini menjelaskan cara membeli dan menggunakan grup sumber daya eksklusif untuk penjadwalan.
Jika Anda belum mengaktifkan DataWorks di wilayah mana pun sebelum 10 Juni 2024, Anda hanya dapat membeli dan menggunakan grup sumber daya Serverless setelah mengaktifkan DataWorks. Anda tidak dapat membeli atau menggunakan grup sumber daya lama. Jika Anda adalah pengguna DataWorks jangka panjang dan perlu beralih ke grup sumber daya Serverless, lihat Tingkatkan grup sumber daya lama.
DataWorks tidak lagi merekomendasikan grup sumber daya eksklusif untuk penjadwalan
DataWorks tidak lagi merekomendasikan menggunakan grup sumber daya eksklusif untuk penjadwalan. Gunakan grup sumber daya serverless sebagai gantinya. Grup sumber daya serverless menyediakan fitur inti dari jenis grup sumber daya sebelumnya, seperti grup sumber daya eksklusif untuk penjadwalan, grup sumber daya eksklusif untuk Integrasi Data, grup sumber daya eksklusif untuk Studio Layanan Data, dan grup sumber daya publik. Sebuah grup sumber daya serverless tunggal memungkinkan Anda menyinkronkan data, menjadwalkan dan menjalankan tugas, serta memanggil dan mengelola layanan API.
Prasyarat
Pelajari spesifikasi, performa, dan metode penagihan grup sumber daya eksklusif untuk penjadwalan. Pahami berapa banyak tugas yang dapat berjalan secara bersamaan pada spesifikasi yang berbeda dan bagaimana mereka dikenakan biaya. Kemudian, rencanakan spesifikasi grup sumber daya dan durasi langganan berdasarkan kebutuhan bisnis Anda. Untuk informasi lebih lanjut, lihat Penagihan grup sumber daya eksklusif untuk penjadwalan.
Pahami skenario yang berlaku untuk grup sumber daya eksklusif untuk penjadwalan. Untuk informasi lebih lanjut, lihat Skenario untuk grup sumber daya eksklusif untuk penjadwalan.
Perhatian
(Opsional) Jika grup sumber daya eksklusif Anda untuk penjadwalan perlu berinteraksi dengan sumber data atau lingkungan jaringan lain, Anda harus memahami solusi konektivitas jaringan dan konfigurasi daftar putih. Ini diperlukan untuk skenario seperti menggunakan node Shell untuk mengakses database yang dikelola sendiri menggunakan alamat IP pribadi, atau menggunakan mesin EMR atau CDH yang memerlukan grup sumber daya eksklusif untuk penjadwalan. Untuk informasi lebih lanjut tentang solusi konektivitas jaringan dan konfigurasi daftar putih untuk berbagai skenario, lihat Penagihan grup sumber daya eksklusif untuk penjadwalan.
Jika Anda tidak perlu terhubung ke instansiasi basis data dan hanya ingin menyelesaikan latensi tugas yang disebabkan oleh sumber daya penjadwalan bersama yang tidak mencukupi, Anda dapat mengabaikan informasi terkait jaringan dalam topik ini. Anda dapat membeli grup sumber daya eksklusif untuk penjadwalan di zona apa pun tanpa mengonfigurasi pengaturan jaringan.
Secara default, grup sumber daya eksklusif untuk penjadwalan dapat mengakses internet. Namun, kualitas akses tidak dijamin karena menggunakan bandwidth bersama. Jika Anda sangat bergantung pada akses internet, gunakan Grup sumber daya Serverless.
Keterbatasan
Hanya Akun Alibaba Cloud atau Pengguna RAM dengan izin AliyunBSSOrderAccess dan AliyunDataWorksFullAccess yang dapat membeli grup sumber daya.
Hanya administrator ruang kerja yang dapat menyambungkan grup sumber daya ke ruang kerja atau mengubah penyambungannya.
Untuk informasi lebih lanjut tentang izin yang diperlukan untuk operasi grup sumber daya, lihat Kebijakan kontrol untuk izin grup sumber daya.
Untuk informasi lebih lanjut tentang cara membuat dan memberikan kebijakan kustom, lihat Buat kebijakan kustom (Opsional).
Grup sumber daya eksklusif untuk penjadwalan dengan spesifikasi
4c8gdapat disambungkan ke maksimal2VPC. Spesifikasi lainnya dapat disambungkan ke maksimal3VPC.Grup sumber daya eksklusif akan dihentikan. Jika Anda belum mengaktifkan DataWorks di wilayah mana pun, Anda hanya dapat membeli dan menggunakan grup sumber daya Serverless setelah Anda mengaktifkan DataWorks. Anda tidak dapat membeli atau menggunakan grup sumber daya lama. Untuk informasi lebih lanjut tentang peluncuran grup sumber daya Serverless, lihat Pengumuman peluncuran grup sumber daya Serverless DataWorks.
Saat tugas berjalan pada grup sumber daya eksklusif untuk penjadwalan, secara default dapat membuat maksimal
100file. Ukuran satu file tidak boleh melebihi150 MB.
Langkah 1: Beli grup sumber daya
DataWorks menyediakan grup sumber daya eksklusif berbasis langganan yang harus dibeli secara terpisah. Untuk membeli grup sumber daya, ikuti langkah-langkah berikut.
Hanya pengguna dengan izin AliyunBSSOrderAccess dan AliyunDataWorksFullAccess yang dapat membeli grup sumber daya.
Masuk ke Konsol DataWorks.
Di panel navigasi di sebelah kiri, klik Resource Group untuk membuka halaman Resource Group List. Pada tab Exclusive Resource Group, klik Create Legacy Scheduling Resource Group. Di halaman pembelian, konfigurasikan parameter sesuai kebutuhan. Parameter utama dijelaskan di bawah ini.
Parameter
Deskripsi
Wilayah
Pilih wilayah tempat Anda akan menggunakan grup sumber daya eksklusif ini.
CatatanGrup sumber daya eksklusif untuk penjadwalan tidak dapat digunakan lintas wilayah. Misalnya, sumber daya eksklusif di wilayah Tiongkok (Shanghai) hanya dapat digunakan oleh ruang kerja di wilayah Tiongkok (Shanghai).
Exclusive Resource Type
Atur ini menjadi Exclusive Resources For Scheduling.
Exclusive Resources For Scheduling
Pilih spesifikasi untuk grup sumber daya eksklusif untuk penjadwalan. Biaya dan jumlah maksimum instansiasi bersamaan bervariasi berdasarkan spesifikasi. Untuk informasi lebih lanjut, lihat Penagihan grup sumber daya eksklusif untuk penjadwalan: Langganan.
Resource Count
Jumlah mesin dalam grup sumber daya. Untuk memastikan ketersediaan tinggi dalam lingkungan produksi, kami sarankan Anda memilih dua mesin atau lebih.
Billing Cycle
Grup sumber daya eksklusif adalah layanan berlangganan. Untuk memastikan layanan tidak terputus, pilih Auto-renewal. Setelah grup sumber daya dibuat, Anda juga dapat pergi ke halaman Renewal Management di konsol Alibaba Cloud untuk mengaktifkan atau menonaktifkan perpanjangan otomatis. Untuk informasi lebih lanjut, lihat Deaktivasi penagihan.
Resource Name
Tetapkan nama untuk grup sumber daya. Nama tersebut harus unik di dalam penyewa Anda. Nama duplikat akan menyebabkan kesalahan selama konfirmasi.
CatatanPenyewa adalah Akun Alibaba Cloud. Penyewa (Akun Alibaba Cloud) dapat memiliki beberapa pengguna (Pengguna RAM).
Klik Buy Now dan ikuti petunjuk untuk membeli grup sumber daya eksklusif untuk penjadwalan.
Setelah pembelian, DataWorks mulai menginisialisasi grup sumber daya eksklusif. Grup sumber daya ditambahkan ke konsol setelah statusnya berubah menjadi Berjalan.
CatatanMenginisialisasi grup sumber daya eksklusif memakan waktu sekitar 20 menit. Tunggu status berubah menjadi Running.
Setelah grup sumber daya eksklusif ditambahkan ke konsol, Anda harus menyambungkannya ke ruang kerja sebelum Anda dapat memilihnya dalam konfigurasi tugas.
Langkah 2: Menyambungkan ke ruang kerja
Hanya administrator ruang kerja yang dapat menyambungkan grup sumber daya ke ruang kerja atau mengubah penyambungannya.
Grup sumber daya eksklusif untuk penjadwalan harus disambungkan ke ruang kerja sebelum dapat digunakan. Grup sumber daya eksklusif untuk penjadwalan tunggal dapat dialokasikan ke beberapa ruang kerja, tetapi tidak dapat digunakan lintas wilayah. Misalnya, grup sumber daya eksklusif untuk penjadwalan di wilayah Tiongkok (Shanghai) hanya dapat disambungkan ke ruang kerja di wilayah Tiongkok (Shanghai). Untuk menyambungkan grup sumber daya ke ruang kerja, ikuti langkah-langkah berikut.
Masuk ke Konsol DataWorks.
Di halaman Resource Group List, klik tab Exclusive Resource Group. Temukan grup sumber daya target dan klik Attach Workspace.
Di halaman Attach Workspace, temukan ruang kerja yang ingin Anda sambungkan dengan grup sumber daya eksklusif, lalu klik Attach.
Langkah 3: Konfigurasi pengaturan jaringan
Menyambungkan VPC
Jika grup sumber daya eksklusif Anda untuk penjadwalan perlu berinteraksi dengan sumber data atau lingkungan jaringan lain, Anda harus mengonfigurasi penyambungan VPC dan pengaturan daftar putih. Ini diperlukan untuk skenario seperti menggunakan node Shell untuk mengakses database yang dikelola sendiri menggunakan alamat IP pribadi, atau menggunakan mesin EMR atau CDH yang memerlukan grup sumber daya eksklusif untuk penjadwalan.
Grup sumber daya eksklusif diterapkan di VPC yang dikelola oleh DataWorks. Untuk memungkinkan konektivitas dengan sumber data lain, Anda harus menyambungkan VPC Anda sendiri ke grup sumber daya. Untuk menyambungkan VPC, ikuti langkah-langkah berikut.
Grup sumber daya eksklusif untuk penjadwalan dengan spesifikasi 4c8g dapat disambungkan ke maksimal 2 VPC. Spesifikasi lainnya dapat disambungkan ke maksimal 3 VPC.
Masuk ke Konsol DataWorks.
Di halaman Resource Group List, pada tab Exclusive Resource Group, temukan grup sumber daya target dan klik Network Settings untuk membuka halaman penyambungan.
Sebelum Anda menyambungkan VPC, gunakan Akun Alibaba Cloud Anda untuk memberikan otorisasi RAM. Hanya Akun Alibaba Cloud yang memiliki izin ini. Otorisasi ini memungkinkan DataWorks mengakses sumber daya cloud Anda.
Mengikat VPC.
Klik Add Binding di pojok kiri atas halaman VPC Binding. Di kotak dialog Add VPC Binding, konfigurasikan parameter. Parameter bervariasi berdasarkan lingkungan jaringan.
CatatanUntuk skenario seperti instansiasi Alibaba Cloud dan instansiasi ECS yang dikelola sendiri, Anda dapat memilih solusi konektivitas jaringan dan mengonfigurasi pengaturan berdasarkan apakah ruang kerja DataWorks dan sumber data berada di bawah Akun Alibaba Cloud yang sama.
Parameter
Konfigurasi (sumber data dan grup sumber daya eksklusif di akun dan wilayah yang sama)
Konfigurasi (sumber data dan grup sumber daya eksklusif di akun atau wilayah berbeda)
Attach VPC
Jika sumber data dan grup sumber daya eksklusif berada di Akun Alibaba Cloud yang sama, pilih VPC tempat sumber data berada.
Jika mereka berada di Akun Alibaba Cloud yang berbeda, ikuti instruksi untuk skenario di mana mereka berada di wilayah berbeda.
Jika sumber data dan grup sumber daya eksklusif Anda berada di wilayah berbeda atau milik Akun Alibaba Cloud yang berbeda, pilih virtual private cloud (VPC) yang terhubung ke jaringan sumber data target. Misalnya, jika sumber data tidak berada di VPC Alibaba Cloud, klik Create VPC untuk membuat VPC untuk grup sumber daya eksklusif. Setelah VPC dibuat, pilih VPC baru atau VPC yang sudah terhubung ke jaringan database target.
CatatanJika ruang kerja DataWorks dan sumber data berada di wilayah berbeda atau milik Akun Alibaba Cloud yang berbeda, gunakan Gateway VPN atau Express Connect untuk menghubungkan VPC yang terikat ke grup sumber daya eksklusif dengan VPC sumber data. Lalu, Anda harus menambahkan rute yang menunjuk ke alamat IP database target untuk memastikan konektivitas antara kedua jaringan. Untuk informasi lebih lanjut, lihat Solusi konektivitas jaringan.
Zone
Pilih zona tempat database berada.
Pilih zona yang memiliki koneksi jaringan ke database target.
VSwitch
Jika Anda memilih VPC tempat sumber data berada, pilih vSwitch tempat sumber data terhubung.
CatatanSaat Anda mengikat grup sumber daya eksklusif untuk Integrasi Data ke VPC sumber data dan vSwitch apa pun di VPC tersebut, rute ke blok CIDR VPC secara otomatis ditambahkan. Ini memastikan bahwa grup sumber daya dapat mengakses sumber data di VPC.
Pilih vSwitch yang terhubung ke jaringan database target. Jika tidak ada vSwitch yang tersedia, klik Create VSwitch untuk membuat satu untuk grup sumber daya eksklusif. Setelah Anda membuat vSwitch, pilih itu.
Klik OK untuk mengikat VPC.
CatatanJika sumber data dan grup sumber daya eksklusif berada di wilayah atau Akun Alibaba Cloud yang berbeda, Anda harus menambahkan aturan perutean yang menunjuk ke alamat IP database target setelah Anda mengikat VPC.
Opsional: Konfigurasikan host.
Jika sumber data Anda diakses oleh nama domain bukan alamat IP, Anda harus mengonfigurasi pemetaan host. Jika tidak, tes konektivitas gagal saat Anda menambahkan sumber data menggunakan nama domain-nya.
Klik Hostname-to-IP Mapping lalu klik Add di pojok kiri atas. Di kotak dialog Create Hostname-to-IP Mapping, konfigurasikan parameter. Parameter dijelaskan sebagai berikut.
Parameter
Deskripsi
IP Address
Alamat IP sebenarnya dari sumber data.
Hostname
Nama host yang digunakan untuk mengakses sumber data. Untuk menambahkan beberapa nama host, letakkan masing-masing pada baris terpisah.
Untuk memetakan nama domain ke beberapa alamat IP, klik Add.
CatatanAlamat IP dan nama domain dalam konfigurasi host baru tidak boleh sama dengan yang ada dalam konfigurasi host yang sudah ada.
Dalam konfigurasi host, hubungan antara alamat IP dan nama domain adalah satu-ke-banyak. Satu alamat IP dapat dipetakan ke beberapa nama domain, tetapi satu nama domain hanya dapat dipetakan ke satu alamat IP.
Tambahkan ke daftar putih
Jika grup sumber daya dan sumber data berada di zona, VPC, dan vSwitch yang sama, tetapi jaringan tidak terhubung, penyebabnya mungkin pembatasan daftar putih sumber data. Dalam hal ini, tambahkan informasi berikut ke daftar putih sumber data.
Untuk menghubungkan sumber data dan grup sumber daya eksklusif melalui jaringan internal, tambahkan blok CIDR vSwitch dari VPC yang disambungkan ke daftar putih sumber data.
Setelah Anda menyambungkan VPC ke grup sumber daya eksklusif, pergi ke halaman di DataWorks. Klik Network Settings untuk grup sumber daya yang sesuai. Pada tab VPC Attachment, Anda dapat melihat VSwitch CIDR Block.

Untuk menghubungkan sumber data ke grup sumber daya eksklusif melalui internet: Tambahkan EIP Address dari grup sumber daya eksklusif ke daftar putih sumber data.

Langkah 4: Tes konektivitas jaringan
Setelah Anda menyelesaikan konfigurasi jaringan, uji konektivitas jaringan antara grup sumber daya dan sumber data dengan mengikuti langkah-langkah ini.
Pergi ke halaman Sumber Data.
Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah yang diinginkan. Di panel navigasi di sebelah kiri, pilih . Di halaman yang muncul, pilih ruang kerja yang diinginkan dari daftar drop-down dan klik Go to Management Center.
Di panel navigasi kiri halaman SettingCenter, klik Data Sources.
Di kolom Operation untuk sumber data target, klik Edit.
Di halaman edit sumber data, klik Test Connectivity untuk grup sumber daya penjadwalan data yang sesuai. Koneksi berhasil jika statusnya adalah Connected.
CatatanAntarmuka konfigurasi bervariasi berdasarkan jenis sumber data. Antarmuka aktual yang berlaku.
Jika sumber data digunakan di lingkungan pengembangan dan produksi, Anda harus menguji konektivitas jaringan antara sumber data dan grup sumber daya di setiap lingkungan.
Untuk informasi lebih lanjut tentang konektivitas jaringan antara grup sumber daya eksklusif dan sumber data dalam berbagai lingkungan jaringan, lihat Solusi konektivitas jaringan.
Operasi lainnya
Lihat penggunaan grup sumber daya dan pantau grup sumber daya
Anda dapat melihat penggunaan dan status antrian grup sumber daya di konsol DataWorks. Anda juga dapat menggunakan fitur pemantauan cerdas di Pusat Operasi untuk memantau tingkat penggunaan grup sumber daya dan jumlah instansiasi yang menunggu sumber daya. Jika tugas memerlukan waktu yang berlebihan untuk dieksekusi, periksa penggunaan grup sumber daya untuk menentukan apakah semua sumber daya sedang digunakan. Untuk informasi lebih lanjut, lihat Lihat penggunaan grup sumber daya eksklusif. Untuk informasi lebih lanjut tentang pemantauan grup sumber daya, lihat Buat aturan kustom.
Gunakan Asisten O&M untuk menjalankan perintah pada grup sumber daya
Selama pengembangan, Anda dapat menggunakan fitur Asisten O&M untuk menjalankan perintah pada grup sumber daya eksklusif untuk penjadwalan. Misalnya, Anda dapat menggunakan fitur ini untuk menginstal paket PyODPS pihak ketiga. Untuk informasi lebih lanjut tentang cara menggunakan Asisten O&M, lihat Asisten O&M.
Ubah zona grup sumber daya
Untuk mengubah zona grup sumber daya, ikuti langkah-langkah berikut:
Masuk ke Konsol DataWorks.
Di panel navigasi di sebelah kiri, klik Resource Group. Di halaman Resource Group List, klik tab Exclusive Resource Group dan temukan grup sumber daya yang Purpose-nya adalah Data Scheduling.
Di kolom Actions untuk grup sumber daya, klik ikon
dan pilih Change Zone. Kotak dialog Change Resource Group Zone terbuka.Di kotak dialog Change Zone For Resource Group, pilih Current Zone dan masukkan Number Of Machines. Lalu, pilih New Zone dan masukkan Number Of Machines To Change.
Klik tombol Confirm Change untuk menyelesaikan perubahan zona.
Mengubah zona grup sumber daya dapat menyebabkan perubahan jaringan berikut:
Blok CIDR grup sumber daya: Setiap zona dalam grup sumber daya sesuai dengan blok CIDR independen. Oleh karena itu, blok CIDR hanya berubah jika zona grup sumber daya berubah. Jika zona grup sumber daya berubah, blok CIDR yang sesuai juga disesuaikan.
Alamat IP NIC utama grup sumber daya: Alamat IP NIC utama dari instansiasi ECS yang diganti berubah. Alamat IP baru dialokasikan ulang dari blok CIDR zona tujuan.
Antarmuka jaringan elastis (ENI) yang disambungkan ke grup sumber daya: Jika blok CIDR vSwitch ditambahkan ke daftar putih, perubahan ini tidak berpengaruh. Namun, jika alamat IP ENI yang disambungkan ke grup sumber daya ditambahkan ke daftar putih, Anda harus memperbarui konfigurasi daftar putih untuk memastikan akses berkelanjutan dan operasi normal.
Lampiran: Ubah grup sumber daya penjadwalan
Setelah Anda mengonfigurasi tugas untuk menggunakan grup sumber daya eksklusif untuk penjadwalan, Anda dapat mengubah grup sumber daya yang digunakan oleh tugas dengan cara berikut.
Lingkungan Operasi | Operasi Pengalihan yang Didukung | Entri Antarmuka |
Ubah zona produksi grup sumber daya | Pengalihan massal |
Penting Anda tidak dapat mengubah grup sumber daya untuk jenis tugas seperti node beban nol, alur kerja, dan node Platform for AI (PAI). Jangan pilih mereka. |
Ubah zona pengembangan grup sumber daya |
| Pergi ke halaman DataStudio untuk mengonfigurasi:
|
Ubah zona debug DataStudio grup sumber daya | Pengalihan tugas tunggal | Pergi ke halaman pengeditan kode untuk node tunggal di DataStudio. Klik tombol |

