Jika Anda berencana untuk beralih dari kelompok sumber daya DataWorks lama ke kelompok sumber daya Serverless, evaluasi konsumsi sumber daya tugas yang ada untuk memastikan migrasi lancar. Kemudian, beralihlah ke kelompok sumber daya Serverless dengan kapasitas yang cukup untuk menangani semua tugas Anda. Topik ini memberikan contoh cara memperkirakan unit komputasi (CU) yang diperlukan untuk berbagai tugas, menjelaskan dampak potensial dari pergantian tersebut, dan memberikan instruksi tentang cara beralih dari kelompok sumber daya lama ke kelompok sumber daya Serverless.
Kelompok sumber daya baru
DataWorks mendukung kelompok sumber daya eksklusif untuk Data Integration, penjadwalan, dan DataService Studio. Namun, Anda harus membeli dan mengonfigurasi kelompok sumber daya ini secara terpisah. Untuk meningkatkan manajemen sumber daya di seluruh fitur DataWorks dan menyediakan pengalaman pengguna yang seragam, DataWorks memperkenalkan kelompok sumber daya Serverless. Sebuah kelompok sumber daya Serverless tunggal dapat digunakan untuk Data Integration, penjadwalan tugas, dan DataService Studio, menyederhanakan manajemen kelompok sumber daya dan meningkatkan konsistensi operasional.
Penagihan
Sebelum Anda beralih, tinjau informasi penagihan untuk kelompok sumber daya lama: Penagihan untuk kelompok sumber daya lama.
Setelah Anda beralih, tinjau informasi penagihan untuk kelompok sumber daya Serverless: Penagihan untuk kelompok sumber daya Serverless.
Prosedur
Langkah 1: Kueri tugas dalam kelompok sumber daya yang akan dialihkan
Data Integration
Beralih Tugas Integrasi Data pada Halaman Data Integration:
Pergi ke halaman Data Integration.
Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah yang diinginkan. Di panel navigasi di sebelah kiri, pilih . Pada halaman yang muncul, pilih ruang kerja yang diinginkan dari daftar drop-down dan klik Go to Data Integration.
Di panel navigasi di sebelah kiri, klik Sync Tasks. Di bagian Task List, klik Expand. Filter tugas dengan mengatur Resource Group ke kelompok sumber daya integrasi data yang ingin Anda alihkan.
Beralih Tugas Integrasi Data pada Halaman Data Studio Baru:
Pergi ke halaman Ruang Kerja di Konsol DataWorks. Di bilah navigasi atas, pilih wilayah yang diinginkan. Temukan ruang kerja yang diinginkan dan pilih di kolom Actions.
Halaman Data Studio muncul secara default. Klik ikon
untuk Project Directory untuk melakukan operasi batch pada node.Filter node berdasarkan kelompok sumber daya yang ingin Anda alihkan, dan pilih jenis node yang relevan (Sinkronisasi Real-time dan Sinkronisasi Offline).
Beralih Tugas Integrasi Data pada Halaman Data Studio Lama:
Pergi ke halaman DataStudio.
Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah yang diinginkan. Di panel navigasi di sebelah kiri, pilih . Pada halaman yang muncul, pilih ruang kerja yang diinginkan dari daftar drop-down dan klik Go to Data Development.
Di panel navigasi di sebelah kiri, klik Data Development. Temukan alur bisnis target, klik kanan, dan pilih Batch Operations.
Atur Node Type ke Offline Sync dan Real-time Sync. Atur Data Integration Resource Group ke kelompok sumber daya integrasi data yang ingin Anda alihkan.
Penjadwalan tugas
Pergi ke halaman Operation Center.
Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah yang diinginkan. Di panel navigasi di sebelah kiri, pilih . Pada halaman yang muncul, pilih ruang kerja yang diinginkan dari daftar drop-down dan klik Go to Operation Center.
Di panel navigasi di sebelah kiri, pilih . Filter tugas dengan mengatur Scheduling Resource Group ke kelompok sumber daya penjadwalan yang ingin Anda alihkan.
DataService Studio
Pergi ke halaman DataService Studio.
Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah yang diinginkan. Di panel navigasi di sebelah kiri, pilih . Pada halaman yang muncul, pilih ruang kerja yang diinginkan dari daftar drop-down dan klik Go to DataService Studio.
Di panel navigasi di sebelah kiri, klik Service Development. Lalu, klik ikon
untuk pergi ke halaman Batch Operations. Filter layanan dengan mengatur Resource Group ke kelompok sumber daya DataService Studio yang ingin Anda alihkan.
Langkah 2: Evaluasi spesifikasi untuk kelompok sumber daya Serverless sebelum beralih
Setelah Anda beralih ke kelompok sumber daya Serverless, tugas komputasi data (seperti PyODPS2 dan EMR Hive) akan menimbulkan biaya komputasi.
Sebelum Anda beralih, evaluasi konsumsi sumber daya tugas yang ada, termasuk tugas sinkronisasi, tugas penjadwalan, dan tugas DataService Studio. Ini membantu Anda menentukan ukuran kelompok sumber daya Serverless yang akan dibeli dan memastikan bahwa kelompok sumber daya dapat menangani beban kerja bisnis Anda.
Berikut adalah rekomendasi untuk evaluasi:
Integrasi Data
Sinkronisasi offline
Konfigurasi konkurensi untuk tugas sinkronisasi offline | Spesifikasi yang direkomendasikan | Spesifikasi minimum untuk menjalankan tugas |
<4 | 0,5 CU | 0,5 CU |
>=4 |
|
Sinkronisasi real-time
Jenis tugas sinkronisasi | Spesifikasi yang direkomendasikan | Spesifikasi minimum untuk menjalankan tugas | |
Sinkronisasi real-time untuk MySQL | 1 database | 2 CU | Spesifikasi minimum untuk menjalankan tugas sinkronisasi real-time: 1 CU |
2 hingga 5 database | 2 CU | ||
6 atau lebih database | 2 CU | ||
Sinkronisasi real-time untuk Kafka | 1 CU | ||
Jenis lain dari tugas sinkronisasi real-time tabel tunggal | 1 CU | ||
Sinkronisasi real-time untuk seluruh database | - | Spesifikasi minimum untuk menjalankan tugas sinkronisasi seluruh database: 2 CU | |
Penjadwalan tugas
Kelompok sumber daya serverless mendukung maksimum 200 instans yang berjalan secara bersamaan. Spesifikasi CU dari kelompok sumber daya serverless dapat diabaikan. Jumlah default instans yang berjalan secara bersamaan adalah 50. Anda dapat mengatur jumlah maksimum tugas penjadwalan bersamaan menjadi 200 di halaman detail kelompok sumber daya.
DataService Studio
Permintaan per detik maksimum (QPS) | Spesifikasi minimum | Perjanjian Tingkat Layanan (SLA) |
500 | 4 CU | 99,95% |
1000 | 8 CU | |
2000 | 16 CU |
Komputasi data
Setiap tugas komputasi data memiliki jumlah CU default. Untuk informasi lebih lanjut, lihat Jenis Tugas dan Konsumsi CU.
Langkah 3: Beli kelompok sumber daya Serverless
Beli kelompok sumber daya Serverless berdasarkan evaluasi Anda. Untuk informasi lebih lanjut, lihat Gunakan Kelompok Sumber Daya Serverless.
Langkah 4: Beralih ke kelompok sumber daya Serverless
Beralih Kelompok Sumber Daya untuk Data Integration
CatatanSetelah Anda beralih ke kelompok sumber daya Serverless, DataWorks secara otomatis merekomendasikan jumlah CU berdasarkan konfigurasi tugas asli. Untuk mengatur jumlah CU untuk kelompok sumber daya secara manual, lihat rekomendasi di Langkah 2: Evaluasi Spesifikasi untuk Kelompok Sumber Daya Serverless Sebelum Beralih.
Beralih Kelompok Sumber Daya untuk Tugas Penjadwalan
CatatanTugas penjadwalan berjalan di kelompok sumber daya DataWorks. Sebagian kuota kelompok sumber daya dialokasikan untuk konfigurasi CU tugas komputasi-teroptimalkan. Saat Anda mengubah kelompok sumber daya penjadwalan, kelompok sumber daya yang digunakan untuk komputasi tugas juga berubah.
Beralih Kelompok Sumber Daya untuk DataService Studio
CatatanSebelum Anda beralih, Anda harus mengatur kuota untuk DataService Studio. Jika tidak ada kuota yang diatur, Anda tidak dapat memilih kelompok sumber daya Serverless selama pergantian. Untuk informasi lebih lanjut tentang cara mengatur kuota untuk DataService Studio, lihat Alokasikan Kuota CU ke Tugas.
Operasi lainnya
Setelah Anda beralih ke kelompok sumber daya Serverless, Anda dapat berhenti berlangganan dari kelompok sumber daya lama jika Anda tidak lagi membutuhkannya. Untuk informasi lebih lanjut, lihat Referensi Umum: Berhenti Berlangganan dari Produk Langganan.