Layanan Transmisi Data (DTS) mendukung sinkronisasi data satu arah lintas akun Alibaba Cloud. Fitur ini berguna untuk skenario seperti migrasi atau konsolidasi sumber daya antar akun dan penyesuaian arsitektur bisnis.
Prasyarat
Anda telah membuat instans target ApsaraDB for Tair (kompatibel dengan Redis) dengan kapasitas penyimpanan yang lebih besar daripada ruang penyimpanan yang digunakan oleh instans sumber ApsaraDB for Tair (kompatibel dengan Redis).
Untuk informasi mengenai versi yang didukung, lihat Ikhtisar Solusi Sinkronisasi.
Informasi latar belakang
Jika Anda memiliki dua instans Redis yang termasuk dalam akun Alibaba Cloud berbeda, Anda mungkin perlu menyinkronkan data dari instans Redis di Akun A ke instans Redis di Akun B karena alasan bisnis. Proses ini dikenal sebagai sinkronisasi data lintas akun.
DTS mendukung sinkronisasi satu arah ApsaraDB for Tair (kompatibel dengan Redis) lintas akun Alibaba Cloud yang berbeda. Untuk mengonfigurasi tugas sinkronisasi, Anda harus menyelesaikan langkah-langkah berikut.
Langkah | Deskripsi |
1. Masuk ke Konsol Manajemen Alibaba Cloud menggunakan akun Alibaba Cloud yang memiliki database sumber dan otorisasi peran RAM. Untuk informasi selengkapnya, lihat Konfigurasi otorisasi RAM untuk tugas lintas akun. | Konfigurasikan peran RAM untuk menetapkan akun Alibaba Cloud tujuan sebagai akun tepercaya. Kemudian, berikan izin kepada akun tepercaya untuk mengakses sumber daya cloud dari akun saat ini. |
2. Masuk ke Konsol Manajemen Alibaba Cloud menggunakan akun Alibaba Cloud yang memiliki database tujuan dan konfigurasikan tugas sinkronisasi data. Untuk informasi selengkapnya, lihat Prosedur. | DTS dapat membaca data langsung dari instans Redis sumber lintas akun Alibaba Cloud yang berbeda. |
Perhatian
Jenis | Deskripsi |
Batasan database sumber |
|
Batasan lainnya |
|
Penagihan
Jenis sinkronisasi | Biaya konfigurasi tugas |
Sinkronisasi data penuh | Gratis. |
Sinkronisasi data inkremental | Dikenai biaya. Untuk informasi selengkapnya, lihat Ikhtisar penagihan. |
Perintah yang didukung untuk sinkronisasi data inkremental
Jenis versi | Perintah |
Tair (kompatibel dengan Redis OSS) Edisi Komunitas |
|
Tair (kompatibel dengan Redis OSS) Edisi Perusahaan |
|
Operasi PUBLISH tidak dapat disinkronkan.
Jika Anda menjalankan perintah EVAL atau EVALSHA untuk memanggil skrip Lua, DTS tidak dapat mengidentifikasi apakah skrip Lua tersebut dieksekusi pada instans tujuan. Hal ini karena instans tujuan tidak secara eksplisit mengembalikan hasil eksekusi skrip Lua selama sinkronisasi data inkremental.
Ketika DTS menjalankan perintah SYNC atau PSYNC untuk mentransfer data tipe LIST, DTS tidak menghapus data yang sudah ada di instans tujuan. Akibatnya, instans tujuan mungkin berisi catatan data duplikat.
Persiapan
Masuk ke Konsol Manajemen Alibaba Cloud menggunakan akun Alibaba Cloud yang memiliki instans Redis sumber. Kemudian, buat peran RAM dan berikan izin kepada akun Alibaba Cloud tujuan untuk mengakses instans Redis sumber. Untuk informasi selengkapnya, lihat Konfigurasi otorisasi RAM untuk tugas lintas akun.
Prosedur
Topik ini menjelaskan cara mengonfigurasi tugas sinkronisasi saat database sumber berada di Akun Alibaba Cloud yang berbeda. Untuk informasi selengkapnya, lihat Mengonfigurasi otorisasi RAM untuk tugas lintas-akun.
Buka halaman Tugas Sinkronisasi Data menggunakan akun Alibaba Cloud yang memiliki instans tujuan.
Konsol DTS
Masuk ke Konsol DTS.
Di panel navigasi sebelah kiri, klik Data Synchronization.
Di pojok kiri atas halaman, pilih wilayah tempat tugas sinkronisasi data berada.
Konsol DMS
CatatanOperasi aktual mungkin berbeda tergantung pada mode dan tata letak konsol DMS. Untuk informasi selengkapnya, lihat Mode sederhana dan Menyesuaikan tata letak dan gaya konsol DMS.
Masuk ke Konsol DMS.
Di bilah navigasi atas, arahkan kursor ke Data + AI dan pilih .
Dari daftar drop-down di sebelah kanan Data Synchronization Tasks, pilih wilayah tempat instans sinkronisasi data berada.
Klik Create Task untuk menuju ke halaman konfigurasi tugas.
Konfigurasikan database sumber dan tujuan. Tabel berikut menjelaskan parameter-parameter tersebut.
PeringatanSetelah Anda mengonfigurasi database sumber dan tujuan, kami sarankan Anda membaca Limits yang ditampilkan di halaman. Jika tidak, tugas mungkin gagal atau terjadi ketidakkonsistenan data.
Kategori
Konfigurasi
Deskripsi
N/A
Task Name
Nama tugas DTS. DTS secara otomatis menghasilkan nama tugas. Kami merekomendasikan agar Anda menentukan nama deskriptif yang memudahkan identifikasi tugas. Anda tidak perlu menentukan nama tugas yang unik.
Source Database
Select Existing Connection
Jika Anda menggunakan instans database yang telah didaftarkan ke DTS, pilih instans tersebut dari daftar drop-down. DTS secara otomatis mengisi parameter database berikut untuk instans tersebut. Untuk informasi selengkapnya, lihat Kelola koneksi database.
CatatanDi konsol DMS, Anda dapat memilih instans database dari daftar drop-down Select a DMS database instance.
Jika Anda gagal mendaftarkan instans ke DTS, atau Anda tidak perlu menggunakan instans yang telah didaftarkan ke DTS, Anda harus mengonfigurasi informasi database berikut.
Database Type
Pilih Tair/Redis.
Access Method
Pilih Alibaba Cloud Instance.
Instance Region
Pilih wilayah tempat instans sumber Tair (kompatibel dengan Redis OSS) berada.
Replicate Data Across Alibaba Cloud Accounts
Pilih Yes.
CatatanFitur ini mendukung komunikasi lintas situs, artinya akun situs China (aliyun.com) dan akun situs internasional (alibabacloud.com) dapat saling berkomunikasi.
Alibaba Cloud Account
Masukkan ID akun Alibaba Cloud yang memiliki instans sumber Tair (kompatibel dengan Redis OSS).
CatatanUntuk informasi cara mendapatkan ID, lihat Dapatkan ID akun Alibaba Cloud yang memiliki database sumber.
RAM Role Name
Masukkan nama peran RAM yang dibuat menggunakan akun Alibaba Cloud yang memiliki database sumber, misalnya, ram-for-dts.
CatatanUntuk informasi cara membuat peran, lihat Langkah 1: Buat peran RAM.
Instance ID
Pilih ID instans sumber Tair (kompatibel dengan Redis OSS).
Authentication Method
Pilih metode autentikasi berdasarkan kebutuhan bisnis Anda. Dalam contoh ini, pilih Password Login.
CatatanHanya database Redis versi 6.0 atau lebih baru yang mendukung Account + Password Login.
Jika Anda memilih Secret-free login, pastikan Anda mengaktifkan fitur akses tanpa kata sandi di database Redis. Untuk informasi cara mengaktifkan akses tanpa kata sandi untuk instans Tair (Kompatibel dengan Redis OSS), lihat Aktifkan akses tanpa kata sandi.
Database Password
Masukkan kata sandi untuk akun instans sumber Tair (kompatibel dengan Redis OSS). Akun tersebut harus memiliki izin baca. Jika Anda lupa kata sandi, Anda dapat mengatur ulang. Untuk informasi selengkapnya, lihat Ubah atau atur ulang kata sandi.
Akun default (dinamai sesuai ID instans): Masukkan kata sandi secara langsung.
Akun yang baru dibuat: Format kata sandi adalah
<custom_account>:<password>, misalnya, testaccount:Test1234.
CatatanIni bukan kolom wajib. Jika tidak ada kata sandi yang diatur, Anda dapat mengosongkannya.
Encryption
Menentukan apakah akan mengenkripsi koneksi ke database sumber. Pilih Non-encrypted atau SSL-encrypted berdasarkan kebutuhan bisnis Anda.
CatatanJika Anda mengatur Access Method bukan ke Alibaba Cloud Instance dan memilih SSL-encrypted untuk database Redis yang dikelola sendiri, Anda harus mengunggah CA Certificate dan memasukkan CA Key.
Destination Database
Select Existing Connection
Jika Anda menggunakan instans database yang telah didaftarkan ke DTS, pilih instans tersebut dari daftar drop-down. DTS secara otomatis mengisi parameter database berikut untuk instans tersebut. Untuk informasi selengkapnya, lihat Kelola koneksi database.
CatatanDi konsol DMS, Anda dapat memilih instans database dari daftar drop-down Select a DMS database instance.
Jika Anda gagal mendaftarkan instans ke DTS, atau Anda tidak perlu menggunakan instans yang telah didaftarkan ke DTS, Anda harus mengonfigurasi informasi database berikut.
Database Type
Pilih Tair/Redis.
Access Method
Pilih Alibaba Cloud Instance.
Instance Region
Pilih wilayah tempat instans tujuan Tair (kompatibel dengan Redis OSS) berada.
Replicate Data Across Alibaba Cloud Accounts
Contoh ini menggunakan instans sumber lintas akun. Pilih No.
Instance ID
Pilih ID instans tujuan Tair (kompatibel dengan Redis OSS).
Authentication Method
Pilih metode autentikasi berdasarkan kebutuhan bisnis Anda. Dalam contoh ini, pilih Password Login.
CatatanHanya database Redis versi 6.0 atau lebih baru yang mendukung Account + Password Login.
Jika Anda memilih Secret-free login, pastikan Anda mengaktifkan fitur akses tanpa kata sandi di database Redis. Untuk informasi cara mengaktifkan akses tanpa kata sandi untuk instans Tair (Kompatibel dengan Redis OSS), lihat Aktifkan akses tanpa kata sandi.
Database Password
Masukkan kata sandi untuk akun instans tujuan Tair (kompatibel dengan Redis OSS). Akun tersebut harus memiliki izin baca dan tulis. Jika Anda lupa kata sandi, Anda dapat mengatur ulang. Untuk informasi selengkapnya, lihat Ubah atau atur ulang kata sandi.
Akun default (dinamai sesuai ID instans): Masukkan kata sandi secara langsung.
Akun yang baru dibuat: Format kata sandi adalah
<custom_account>:<password>, misalnya, testaccount:Test1234.
Encryption
Menentukan apakah akan mengenkripsi koneksi ke database sumber. Pilih Non-encrypted atau SSL-encrypted berdasarkan kebutuhan bisnis Anda.
CatatanJika Anda mengatur Access Method bukan ke Alibaba Cloud Instance dan memilih SSL-encrypted untuk database Redis yang dikelola sendiri, Anda harus mengunggah CA Certificate dan memasukkan CA Key.
Klik Test Connectivity and Proceed di bagian bawah halaman.
CatatanPastikan blok CIDR server DTS dapat ditambahkan secara otomatis atau manual ke pengaturan keamanan database sumber dan tujuan untuk mengizinkan akses dari server DTS. Untuk informasi selengkapnya, lihat Tambahkan alamat IP server DTS ke daftar putih.
Jika database sumber atau tujuan adalah database yang dikelola sendiri dan Access Method-nya tidak diatur ke Alibaba Cloud Instance, klik Test Connectivity di kotak dialog CIDR Blocks of DTS Servers.
Konfigurasikan objek yang akan disinkronkan.
Pada langkah Configure Objects, konfigurasikan objek yang ingin Anda sinkronkan.
Konfigurasi
Deskripsi
Synchronization Types
Incremental Data Synchronization atau Full Data Synchronization + Incremental Data Synchronization dipilih secara default. Untuk instans DTS di mana Incremental Data Synchronization dipilih secara default, kami merekomendasikan agar Anda juga memilih Full Data Synchronization. Setelah pemeriksaan awal selesai, DTS menginisialisasi data penuh objek yang akan disinkronkan dari instans sumber ke kluster tujuan. Ini berfungsi sebagai data garis dasar untuk sinkronisasi inkremental berikutnya.
Synchronization Topology
Pilih One-way Synchronization.
CatatanItem konfigurasi ini hanya tersedia jika kedua instans sumber dan tujuan adalah Tair (Edisi Perusahaan).
Processing Mode of Conflicting Tables
Precheck and Report Errors: memeriksa apakah data ada di database tujuan. Jika tidak ada data di database tujuan, pemeriksaan awal berhasil. Jika data ada di database tujuan, kesalahan dikembalikan selama pemeriksaan awal, dan instans sinkronisasi data tidak dapat dimulai.
Ignore Errors and Proceed: melewatkan item pemeriksaan Check the existence of objects in the destination database..
PeringatanJika Anda memilih Ignore Errors and Proceed, kehilangan data mungkin terjadi di database tujuan karena catatan data di database sumber menimpa catatan data yang memiliki kunci yang sama di database tujuan. Lanjutkan dengan hati-hati.
Source Objects
Pilih satu atau beberapa objek dari bagian Source Objects dan klik ikon
untuk menambahkan objek ke bagian Selected Objects.CatatanAnda hanya dapat memilih database sebagai objek yang akan disinkronkan. Jika Anda perlu menyinkronkan data untuk kunci tertentu dalam database, Anda dapat menggunakan fitur penyaringan data di bagian Selected Objects.
Selected Objects
Jika Anda ingin menentukan database untuk menerima data (DB 0 hingga DB 255) atau menyaring data yang akan disinkronkan berdasarkan awalan, Anda dapat menggunakan fitur pemetaan atau penyaringan. Klik kanan database yang akan disinkronkan di bagian Selected Objects, lalu konfigurasikan parameter di kotak dialog Edit Schema yang muncul. Untuk informasi selengkapnya, lihat Pemetaan nama objek dan Tentukan kondisi filter.
Klik Next: Advanced Settings untuk mengonfigurasi pengaturan lanjutan.
Konfigurasi
Deskripsi
Dedicated Cluster for Task Scheduling
Secara default, DTS menjadwalkan tugas ke klaster bersama jika Anda tidak menentukan klaster khusus. Jika Anda ingin meningkatkan stabilitas instans sinkronisasi data, beli klaster khusus. Untuk informasi selengkapnya, lihat Apa itu klaster khusus DTS.
Retry Time for Failed Connections
Rentang waktu coba ulang untuk koneksi yang gagal. Jika database sumber atau tujuan gagal terhubung setelah tugas sinkronisasi data dimulai, DTS segera mencoba menghubungkan kembali dalam rentang waktu tersebut. Nilai yang valid: 10 hingga 1440. Satuan: menit. Nilai default: 720. Kami merekomendasikan agar Anda mengatur parameter ini ke nilai lebih dari 30. Jika DTS berhasil menghubungkan kembali ke database sumber dan tujuan dalam rentang waktu yang ditentukan, DTS melanjutkan tugas sinkronisasi data. Jika tidak, tugas sinkronisasi data gagal.
CatatanJika Anda menentukan rentang waktu coba ulang yang berbeda untuk beberapa tugas sinkronisasi data yang memiliki database sumber atau tujuan yang sama, rentang waktu coba ulang terpendek yang berlaku.
Saat DTS mencoba menghubungkan kembali, Anda dikenai biaya untuk instans DTS. Kami merekomendasikan agar Anda menentukan rentang waktu coba ulang berdasarkan kebutuhan bisnis Anda. Anda juga dapat melepaskan instans DTS sesegera mungkin setelah instans sumber dan tujuan dilepas.
Retry Time for Other Issues
Rentang waktu coba ulang untuk masalah lain. Misalnya, jika operasi DDL atau DML gagal dilakukan setelah tugas sinkronisasi data dimulai, DTS segera mencoba mengulang operasi tersebut dalam rentang waktu tersebut. Nilai yang valid: 1 hingga 1440. Satuan: menit. Nilai default: 10. Kami merekomendasikan agar Anda mengatur parameter ini ke nilai lebih dari 10. Jika operasi yang gagal berhasil dilakukan dalam rentang waktu yang ditentukan, DTS melanjutkan tugas sinkronisasi data. Jika tidak, tugas sinkronisasi data gagal.
PentingNilai parameter Retry Time for Other Issues harus lebih kecil daripada nilai parameter Retry Time for Failed Connections.
Enable Throttling for Full Data Synchronization
Selama sinkronisasi data penuh, DTS menggunakan sumber daya baca dan tulis dari database sumber dan tujuan. Hal ini dapat meningkatkan beban pada server database. Anda dapat mengonfigurasi parameter Queries per second (QPS) to the source database, RPS of Full Data Migration, dan Data migration speed for full migration (MB/s) untuk tugas sinkronisasi data penuh guna mengurangi beban pada server database tujuan.
CatatanItem konfigurasi ini hanya tersedia jika Synchronization Types mencakup Full Data Synchronization.
Enable Throttling for Incremental Data Synchronization
Menentukan apakah akan mengaktifkan pembatasan untuk sinkronisasi data inkremental. Anda dapat mengaktifkan pembatasan untuk sinkronisasi data inkremental berdasarkan kebutuhan bisnis Anda. Untuk mengonfigurasi pembatasan, Anda harus mengonfigurasi parameter RPS of Incremental Data Synchronization dan Data synchronization speed for incremental synchronization (MB/s). Hal ini mengurangi beban pada server database tujuan.
Extend Expiration Time of Destination Database Key
Pengaturan ini menambahkan waktu tambahan pada kedaluwarsa kunci yang disinkronkan dari sumber ke database tujuan. Untuk memastikan konsistensi data, kami merekomendasikan memperpanjang waktu kedaluwarsa kunci jika Anda menggunakan salah satu perintah berikut.
CatatanDalam skenario yang melibatkan kunci terdistribusi, hal ini dapat mencegah kunci dilepas secara tepat waktu.
EXPIRE key seconds PEXPIRE key milliseconds EXPIREAT key timestamp PEXPIREAT key timestampMsEnvironment Tag
Jika diperlukan, Anda dapat memilih tag lingkungan untuk mengidentifikasi instans. Untuk contoh ini, tidak diperlukan pemilihan.
Configure ETL
Menentukan apakah akan mengaktifkan fitur ekstrak, transformasi, dan muat (ETL). Untuk informasi selengkapnya, lihat Apa itu ETL? Nilai yang valid:
Yes: mengonfigurasi fitur ETL. Anda dapat memasukkan pernyataan pemrosesan data di editor kode. Untuk informasi selengkapnya, lihat Konfigurasi ETL dalam tugas migrasi data atau sinkronisasi data.
No: tidak mengonfigurasi fitur ETL.
Monitoring and Alerting
Menentukan apakah akan mengonfigurasi peringatan untuk instans sinkronisasi data. Jika tugas gagal atau latensi sinkronisasi melebihi ambang batas yang ditentukan, kontak peringatan akan menerima notifikasi. Nilai yang valid:
No: tidak mengaktifkan peringatan.
Yes: mengonfigurasi peringatan. Dalam hal ini, Anda juga harus mengonfigurasi ambang batas peringatan dan pengaturan notifikasi peringatan. Untuk informasi selengkapnya, lihat bagian "Konfigurasi pemantauan dan peringatan saat membuat tugas DTS" dari topik Konfigurasi pemantauan dan peringatan.
Klik Next Step: Data Verification untuk mengonfigurasi verifikasi data.
Untuk informasi selengkapnya tentang cara menggunakan fitur verifikasi data, lihat Konfigurasi tugas verifikasi data.
Simpan pengaturan tugas dan jalankan pemeriksaan awal.
Untuk melihat parameter yang harus ditentukan saat Anda memanggil operasi API terkait untuk mengonfigurasi tugas DTS, arahkan kursor ke Next: Save Task Settings and Precheck dan klik Preview OpenAPI parameters.
Jika Anda tidak perlu melihat atau telah melihat parameter, klik Next: Save Task Settings and Precheck di bagian bawah halaman.
CatatanSebelum Anda dapat memulai tugas sinkronisasi data, DTS melakukan pemeriksaan awal. Anda hanya dapat memulai tugas sinkronisasi data setelah tugas tersebut lulus pemeriksaan awal.
Jika tugas sinkronisasi data gagal dalam pemeriksaan awal, klik View Details di sebelah setiap item yang gagal. Setelah Anda menganalisis penyebab berdasarkan hasil pemeriksaan, atasi masalah tersebut. Kemudian, jalankan ulang pemeriksaan awal.
Jika peringatan dipicu untuk suatu item selama pemeriksaan awal:
Jika item peringatan tidak dapat diabaikan, klik View Details di sebelah item yang gagal dan atasi masalah tersebut. Kemudian, jalankan pemeriksaan awal lagi.
Jika item peringatan dapat diabaikan, klik Confirm Alert Details. Di kotak dialog View Details, klik Ignore. Di pesan yang muncul, klik OK. Kemudian, klik Precheck Again untuk menjalankan pemeriksaan awal lagi. Jika Anda mengabaikan item peringatan, ketidakkonsistenan data mungkin terjadi, dan bisnis Anda mungkin terpapar risiko potensial.
Beli instans.
Tunggu hingga Success Rate menjadi 100%. Kemudian, klik Next: Purchase Instance.
Di halaman buy, konfigurasikan parameter Metode Penagihan dan Kelas Instans untuk tugas sinkronisasi data. Tabel berikut menjelaskan parameter-parameter tersebut.
Bagian
Parameter
Deskripsi
New Instance Class
Metode Penagihan
Langganan: Anda membayar untuk langganan saat membuat instans sinkronisasi data. Metode penagihan langganan lebih hemat biaya dibandingkan metode penagihan bayar sesuai pemakaian untuk penggunaan jangka panjang.
Bayar sesuai pemakaian: Instans bayar sesuai pemakaian ditagih per jam. Metode penagihan bayar sesuai pemakaian cocok untuk penggunaan jangka pendek. Jika Anda tidak lagi memerlukan instans sinkronisasi data bayar sesuai pemakaian, Anda dapat melepaskan instans tersebut untuk mengurangi biaya.
Pengaturan Grup Sumber Daya
Grup sumber daya tempat instans sinkronisasi data berada. Nilai default: default resource group. Untuk informasi selengkapnya, lihat Apa itu Manajemen Sumber Daya?
Kelas Instans
DTS menyediakan kelas instans yang berbeda dalam kecepatan sinkronisasi. Anda dapat memilih kelas instans berdasarkan kebutuhan bisnis Anda. Untuk informasi selengkapnya, lihat Kelas instans instans sinkronisasi data.
Durasi Langganan
Jika Anda memilih metode penagihan langganan, tentukan durasi langganan dan jumlah instans sinkronisasi data yang ingin Anda buat. Durasi langganan dapat berupa satu hingga sembilan bulan, satu tahun, dua tahun, tiga tahun, atau lima tahun.
CatatanParameter ini hanya tersedia jika Anda memilih metode penagihan Subscription.
Baca dan pilih Data Transmission Service (Pay-as-you-go) Service Terms.
Klik Purchase And Start, dan di kotak dialog OK, klik OK.
Anda dapat melihat progres tugas di halaman sinkronisasi data.
CatatanJika instans DTS Anda mencakup tugas penuh dan inkremental (Synchronization Types mencakup Full Data Synchronization dan Incremental Data Synchronization), instans tersebut akan ditampilkan sebagai Incremental Data Synchronization di halaman daftar tugas sinkronisasi.