Topik ini menjelaskan cara memigrasikan data dari instansi ApsaraDB RDS untuk SQL Server ke klaster PolarDB untuk MySQL menggunakan Data Transmission Service (DTS).
Batasan
Versi instansi sumber ApsaraDB RDS untuk SQL Server didukung oleh DTS. Untuk informasi lebih lanjut tentang versi mesin database yang didukung, lihat Ikhtisar Skenario Migrasi Data.
Klaster tujuan PolarDB untuk MySQL harus memiliki ruang penyimpanan tersedia lebih besar daripada total ukuran data di instansi sumber ApsaraDB RDS untuk SQL Server. Untuk informasi lebih lanjut, lihat Pembelian Kustom dan Pembelian Klaster Langganan.
Beberapa instansi DTS dibeli untuk mengonfigurasi beberapa tugas migrasi data jika instansi sumber ApsaraDB RDS untuk SQL Server memenuhi salah satu kondisi berikut:
Instansi sumber berisi lebih dari 10 database.
Database tunggal dari instansi sumber mencadangkan lognya pada interval kurang dari 1 jam.
Database tunggal dari instansi sumber mengeksekusi lebih dari 100 pernyataan DDL setiap jam.
Log ditulis pada laju 20 MB/s untuk database tunggal dari instansi sumber.
Fitur penangkapan data perubahan (CDC) perlu diaktifkan untuk lebih dari 1.000 tabel dalam instansi ApsaraDB RDS untuk SQL Server sumber.
Batasan
Selama migrasi skema, DTS memigrasikan kunci asing dari database sumber ke database tujuan.
Selama migrasi data penuh dan migrasi data bertahap, DTS sementara menonaktifkan pemeriksaan kendala dan operasi kaskade pada kunci asing di tingkat sesi. Jika Anda melakukan operasi pembaruan dan penghapusan kaskade pada database sumber selama migrasi data, ketidaksesuaian data mungkin terjadi.
Kategori | Deskripsi |
Batasan pada database sumber |
|
Batasan lainnya |
|
Kasus khusus | Jika instansi sumber adalah instansi ApsaraDB RDS untuk SQL Server, DTS secara otomatis membuat akun bernama |
Penagihan
Jenis migrasi | Biaya konfigurasi tugas | Biaya transfer data |
Migrasi skema dan migrasi data penuh | Gratis. | Gratis dalam contoh ini. |
Migrasi data bertahap | Dikenakan biaya. Untuk informasi lebih lanjut, lihat Ikhtisar penagihan. |
Operasi SQL yang dapat dimigrasikan secara bertahap
Jenis operasi | Pernyataan SQL |
DML | INSERT, UPDATE, dan DELETE Catatan Jika operasi UPDATE hanya memperbarui bidang besar, DTS tidak memigrasikan operasi tersebut. |
DDL |
Catatan
|
Izin yang diperlukan untuk akun database
Instance | Migrasi skema | Migrasi data penuh | Migrasi data bertahap |
ApsaraDB RDS untuk SQL Server instansi | Izin baca pada objek yang akan dimigrasikan | Izin baca pada objek yang akan dimigrasikan | Izin pemilik pada objek yang akan dimigrasikan |
PolarDB untuk MySQL klaster | Izin baca dan tulis pada database tujuan | ||
Untuk informasi tentang cara membuat akun database dan memberikan izin kepada akun database, lihat topik berikut:
Instansi ApsaraDB RDS untuk SQL Server: Buat Akun Istimewa atau Akun Standar dan Ubah Izin Akun.
Klaster PolarDB untuk MySQL: Buat dan Kelola Akun Database dan Kelola Akun Database untuk Klaster.
Prosedur
Gunakan salah satu metode berikut untuk pergi ke halaman Migrasi Data dan pilih wilayah tempat instansi migrasi data berada.
Konsol DTS
Masuk ke Konsol DTS.
Di bilah navigasi sisi kiri, klik Data Migration.
Di pojok kiri atas halaman, pilih wilayah tempat instansi migrasi data berada.
Konsol DMS
CatatanOperasi sebenarnya mungkin berbeda berdasarkan mode dan tata letak Konsol DMS. Untuk informasi lebih lanjut, lihat Mode Sederhana dan Sesuaikan Tata Letak dan Gaya Konsol DMS.
Masuk ke Konsol DMS.
Di bilah navigasi atas, gerakkan penunjuk di atas .
Dari daftar drop-down di sebelah kanan Data Migration Tasks, pilih wilayah tempat instansi sinkronisasi data berada.
Klik Create Task untuk pergi ke halaman konfigurasi tugas.
Konfigurasikan database sumber dan tujuan. Tabel berikut menjelaskan parameter.
PeringatanSetelah Anda mengonfigurasi database sumber dan tujuan, kami sarankan Anda membaca Limits yang ditampilkan di bagian atas halaman. Jika tidak, tugas mungkin gagal atau ketidaksesuaian data mungkin terjadi.
Bagian
Parameter
Deskripsi
T/A
Task Name
Nama tugas DTS. DTS secara otomatis menghasilkan nama tugas. Kami sarankan Anda menentukan nama informatif yang memudahkan identifikasi tugas. Anda tidak perlu menentukan nama tugas unik.
Source Database
Select Existing Connection
Jika Anda menggunakan instansi database yang terdaftar dengan DTS, pilih instansi dari daftar drop-down. DTS secara otomatis mengisi parameter database berikut untuk instansi tersebut. Untuk informasi lebih lanjut, lihat Kelola koneksi database.
CatatanDi Konsol DMS, Anda dapat memilih instansi database dari daftar drop-down Select a DMS database instance.
Jika Anda gagal mendaftarkan instansi dengan DTS, atau Anda tidak perlu menggunakan instansi yang terdaftar dengan DTS, Anda harus mengonfigurasi informasi database berikut.
Database Type
Jenis database sumber. Pilih SQL Server.
Access Method
Metode akses database sumber. Pilih Alibaba Cloud Instance.
Instance Region
Wilayah tempat instansi ApsaraDB RDS untuk SQL Server sumber berada.
Replicate Data Across Alibaba Cloud Accounts
Menentukan apakah akan memigrasikan data di seluruh akun Alibaba Cloud. Dalam contoh ini, No dipilih.
RDS Instance ID
ID instansi ApsaraDB RDS untuk SQL Server sumber.
Database Account
Masukkan nama pengguna akun yang digunakan untuk masuk ke database instansi ApsaraDB RDS untuk SQL Server sumber. Untuk informasi tentang izin yang diperlukan, lihat bagian Izin yang diperlukan untuk akun database dari topik ini.
Database Password
Kata sandi yang digunakan untuk mengakses instansi database.
Encryption
Menentukan apakah akan mengenkripsi koneksi ke database sumber. Pilih Non-encrypted atau SSL-encrypted berdasarkan kebutuhan bisnis Anda.
Jika enkripsi SSL dinonaktifkan untuk database sumber, pilih Non-encrypted.
Jika enkripsi SSL diaktifkan untuk database sumber, pilih SSL-encrypted. Secara default, DTS mempercayai sertifikat server.
Destination Database
Select Existing Connection
Jika Anda menggunakan instansi database yang terdaftar dengan DTS, pilih instansi dari daftar drop-down. DTS secara otomatis mengisi parameter database berikut untuk instansi tersebut. Untuk informasi lebih lanjut, lihat Kelola koneksi database.
CatatanDi Konsol DMS, Anda dapat memilih instansi database dari daftar drop-down Select a DMS database instance.
Jika Anda gagal mendaftarkan instansi dengan DTS, atau Anda tidak perlu menggunakan instansi yang terdaftar dengan DTS, Anda harus mengonfigurasi informasi database berikut.
Database Type
Jenis database tujuan. Pilih PolarDB for MySQL.
Access Method
Metode akses database tujuan. Pilih Alibaba Cloud Instance.
Instance Region
Wilayah tempat klaster PolarDB untuk MySQL tujuan berada.
PolarDB Cluster ID
ID klaster PolarDB untuk MySQL tujuan.
Database Account
Akun database klaster PolarDB untuk MySQL tujuan. Untuk informasi tentang izin yang diperlukan, lihat bagian Izin yang diperlukan untuk akun database dari topik ini.
Database Password
Kata sandi yang digunakan untuk mengakses instansi database.
Encryption
Menentukan apakah akan mengenkripsi koneksi ke database tujuan. Anda dapat menentukan parameter ini berdasarkan kebutuhan bisnis Anda. Untuk informasi lebih lanjut tentang fitur enkripsi SSL, lihat Konfigurasi Enkripsi SSL.
Di bagian bawah halaman, klik Test Connectivity and Proceed.
CatatanPastikan blok CIDR server DTS dapat ditambahkan secara otomatis atau manual ke pengaturan keamanan database sumber dan tujuan untuk mengizinkan akses dari server DTS. Untuk informasi lebih lanjut, lihat Tambahkan Blok CIDR Server DTS.
Jika database sumber atau tujuan adalah database mandiri dan Access Method tidak diatur ke Alibaba Cloud Instance, klik Test Connectivity di kotak dialog CIDR Blocks of DTS Servers.
Konfigurasikan objek yang akan dimigrasikan.
Di halaman Configure Objects, konfigurasikan objek yang ingin Anda migrasikan.
Parameter
Deskripsi
Migration Types
Untuk hanya melakukan migrasi data penuh, pilih Schema Migration dan Full Data Migration.
Untuk memastikan kontinuitas layanan selama migrasi data, pilih Schema Migration, Full Data Migration, dan Incremental Data Migration.
CatatanJika Anda tidak memilih Schema Migration, pastikan database dan tabel dibuat di database tujuan untuk menerima data dan fitur pemetaan nama objek diaktifkan di Selected Objects.
Jika Anda tidak memilih Incremental Data Migration, kami sarankan Anda tidak menulis data ke database sumber selama migrasi data. Ini memastikan konsistensi data antara database sumber dan tujuan.
Schema Mapping Mode of Source and Destination Databases
Pilih mode pemetaan skema berdasarkan kebutuhan bisnis Anda.
PeringatanJika Anda tidak menggunakan nama skema dari database sumber, tabel sumber harus memiliki nama unik di berbagai skema. Jika tidak, ketidaksesuaian data mungkin terjadi atau instansi sinkronisasi data mungkin gagal.
SQL Server Incremental Synchronization Mode
Log-based Parsing for Non-heap Tables and CDC-based Incremental Synchronization for Heap Tables (Hybrid Log-based Parsing):
Keuntungan:
Mode ini mendukung tabel heap, tabel tanpa kunci utama, tabel terkompresi, dan tabel dengan kolom terhitung.
Mode ini memberikan stabilitas lebih tinggi dan berbagai pernyataan DDL lengkap.
Kerugian:
DTS membuat pemicu dts_cdc_sync_ddl, tabel denyut jantung dts_sync_progress, dan tabel penyimpanan DDL dts_cdc_ddl_history di database sumber dan mengaktifkan penangkapan data perubahan (CDC) untuk database sumber dan tabel tertentu.
Anda tidak dapat mengeksekusi pernyataan SELECT INTO, TRUNCATE, atau RENAME COLUMN pada tabel dengan CDC yang diaktifkan di database sumber. Pemicu yang dibuat oleh DTS di database sumber tidak dapat dihapus secara manual.
Incremental Synchronization Based on Logs of Source Database (Heap tables are not supported):
Keuntungan:
Mode ini tidak mengubah pengaturan database sumber.
Kerugian:
Mode ini tidak mendukung tabel heap, tabel tanpa kunci utama, tabel terkompresi, atau tabel dengan kolom terhitung.
Polling and querying CDC instances for incremental synchronization:
Keuntungan:
Migrasi data penuh dan migrasi data bertahap didukung jika database sumber adalah instansi Amazon RDS untuk SQL Server, database di Microsoft Azure SQL Database, Microsoft Azure SQL Managed Instance, Microsoft Azure SQL Server pada Mesin Virtual, atau Google Cloud SQL untuk instansi SQL Server.
Jika Anda menggunakan komponen CDC asli SQL Server untuk mendapatkan data bertahap, migrasi bertahap lebih stabil dan menggunakan lebih sedikit bandwidth jaringan.
Kerugian:
Akun database sumber yang digunakan oleh instansi DTS harus memiliki izin untuk mengaktifkan CDC. Migrasi data bertahap membutuhkan waktu sekitar 10 detik.
Jika Anda memigrasikan beberapa tabel di beberapa database, masalah stabilitas dan performa mungkin terjadi.
CatatanParameter ini hanya tersedia jika Anda memilih Incremental Data Migration untuk parameter Migration Types.
The maximum number of tables for which CDC is enabled that DTS supports.
Kami sarankan Anda, berdasarkan kebutuhan bisnis Anda, mengatur jumlah maksimum tabel dengan CDC yang diaktifkan yang didukung oleh tugas DTS. Nilai default: 1.000.
CatatanParameter ini tidak tersedia jika Anda mengatur parameter SQL Server Incremental Synchronization Mode ke Incremental Synchronization Based on Logs of Source Database (Heap tables are not supported).
Processing Mode of Conflicting Tables
Precheck and Report Errors: memeriksa apakah database tujuan berisi tabel yang menggunakan nama yang sama dengan tabel di database sumber. Jika database sumber dan tujuan tidak berisi tabel dengan nama identik, pemeriksaan awal berhasil. Jika tidak, kesalahan akan dilaporkan selama pemeriksaan awal dan tugas migrasi data tidak dapat dimulai.
CatatanJika database sumber dan tujuan berisi tabel dengan nama identik dan tabel di database tujuan tidak dapat dihapus atau diganti namanya, Anda dapat menggunakan fitur pemetaan nama objek untuk mengganti nama tabel yang dimigrasikan ke database tujuan. Untuk informasi lebih lanjut, lihat Pemetaan Nama Objek.
Ignore Errors and Proceed: melewati pemeriksaan awal untuk nama tabel identik di database sumber dan tujuan.
PeringatanJika Anda memilih Ignore Errors and Proceed, ketidaksesuaian data mungkin terjadi dan bisnis Anda mungkin terpapar risiko potensial berikut:
Jika database sumber dan tujuan memiliki skema yang sama, dan catatan data memiliki kunci utama yang sama dengan catatan data yang ada di database tujuan, skenario berikut mungkin terjadi:
Selama migrasi data penuh, DTS tidak memigrasikan catatan data ke database tujuan. Catatan data yang ada di database tujuan dipertahankan.
Selama migrasi data bertahap, DTS memigrasikan catatan data ke database tujuan. Catatan data yang ada di database tujuan ditimpa.
Jika database sumber dan tujuan memiliki skema yang berbeda, hanya kolom tertentu yang dimigrasikan atau tugas migrasi data gagal. Lanjutkan dengan hati-hati.
Capitalization of Object Names in Destination Instance
Kapitalisasi nama database, nama tabel, dan nama kolom di instansi tujuan. Secara default, DTS default policy dipilih. Anda dapat memilih opsi lain untuk memastikan kapitalisasi nama objek konsisten dengan database sumber atau tujuan. Untuk informasi lebih lanjut, lihat Tentukan Kapitalisasi Nama Objek di Instansi Tujuan.
Source Objects
Pilih satu atau lebih objek dari bagian Source Objects. Klik ikon
untuk menambahkan objek ke bagian Selected Objects.CatatanAnda dapat memilih kolom, tabel, atau skema sebagai objek yang akan dimigrasikan. Jika Anda memilih tabel atau kolom sebagai objek yang akan dimigrasikan, DTS tidak memigrasikan objek lainnya, seperti tampilan, pemicu, atau prosedur tersimpan, ke database tujuan.
Selected Objects
Untuk mengganti nama objek yang ingin Anda migrasikan ke instansi tujuan, klik kanan objek di bagian Selected Objects. Untuk informasi lebih lanjut, lihat Pemetaan Nama Objek Tunggal.
Untuk mengganti nama beberapa objek sekaligus, klik Batch Edit di pojok kanan atas bagian Selected Objects. Untuk informasi lebih lanjut, lihat Pemetaan Beberapa Nama Objek Sekaligus.
CatatanJika Anda menggunakan fitur pemetaan nama objek, objek lain yang bergantung pada objek tersebut mungkin gagal dimigrasikan.
Untuk menetapkan kondisi WHERE untuk menyaring data, klik kanan tabel yang akan dimigrasikan di bagian Selected Objects dan konfigurasikan kondisi filter di kotak dialog yang muncul. Untuk informasi lebih lanjut, lihat Konfigurasi Kondisi Filter.
Untuk memilih operasi SQL untuk migrasi bertahap pada tingkat database atau tabel, klik kanan objek yang akan dimigrasikan di bagian Selected Objects dan pilih operasi SQL untuk migrasi bertahap di kotak dialog yang muncul.
Klik Next: Advanced Settings untuk mengonfigurasi pengaturan lanjutan.
Parameter
Deskripsi
Dedicated Cluster for Task Scheduling
Secara default, DTS menjadwalkan tugas migrasi data ke klaster bersama jika Anda tidak menentukan klaster khusus. Jika Anda ingin meningkatkan stabilitas tugas migrasi data, belilah klaster khusus. Untuk informasi lebih lanjut, lihat Apa itu Klaster Khusus DTS?
Retry Time for Failed Connections
Rentang waktu ulang untuk koneksi gagal. Jika database sumber atau tujuan gagal terhubung setelah tugas migrasi data dimulai, DTS segera mencoba kembali koneksi dalam rentang waktu ulang. Nilai valid: 10 hingga 1.440. Unit: menit. Nilai default: 720. Kami sarankan Anda mengatur parameter ini ke nilai lebih besar dari 30. Jika DTS terhubung kembali ke database sumber dan tujuan dalam rentang waktu ulang yang ditentukan, DTS melanjutkan tugas migrasi data. Jika tidak, tugas migrasi data gagal.
CatatanJika Anda menentukan rentang waktu ulang yang berbeda untuk beberapa tugas migrasi data yang berbagi database sumber atau tujuan yang sama, nilai yang ditentukan kemudian akan menggantikan nilai sebelumnya.
Saat DTS mencoba kembali koneksi, Anda akan dikenakan biaya untuk instansi DTS. Kami sarankan Anda menentukan rentang waktu ulang berdasarkan kebutuhan bisnis Anda. Anda juga dapat melepaskan instansi DTS sesegera mungkin setelah database sumber dan tujuan dilepaskan.
Retry Time for Other Issues
Rentang waktu ulang untuk masalah lainnya. Misalnya, jika operasi DDL atau DML gagal dieksekusi setelah tugas migrasi data dimulai, DTS segera mencoba kembali operasi dalam rentang waktu ulang. Nilai valid: 1 hingga 1.440. Unit: menit. Nilai default: 10. Kami sarankan Anda mengatur parameter ini ke nilai lebih besar dari 10. Jika operasi gagal berhasil dilakukan dalam rentang waktu ulang yang ditentukan, DTS melanjutkan tugas migrasi data. Jika tidak, tugas migrasi data gagal.
PentingNilai parameter Retry Time for Other Issues harus lebih kecil dari nilai parameter Retry Time for Failed Connections.
Enable Throttling for Full Data Migration
Menentukan apakah akan mengaktifkan pembatasan untuk migrasi data penuh. Selama migrasi data penuh, DTS menggunakan sumber daya baca dan tulis dari database sumber dan tujuan. Ini dapat meningkatkan beban server database. Anda dapat mengaktifkan pembatasan untuk migrasi data penuh berdasarkan kebutuhan bisnis Anda. Untuk mengonfigurasi pembatasan, Anda harus mengonfigurasi parameter Queries per second (QPS) to the source database, RPS of Full Data Migration, dan Data migration speed for full migration (MB/s). Ini mengurangi beban server database tujuan.
CatatanAnda hanya dapat mengonfigurasi parameter ini jika Anda memilih Full Data Migration untuk parameter Migration Types.
Enable Throttling for Incremental Data Migration
Menentukan apakah akan mengaktifkan pembatasan untuk migrasi data bertahap. Untuk mengonfigurasi pembatasan, Anda harus mengonfigurasi parameter RPS of Incremental Data Migration dan Data migration speed for incremental migration (MB/s). Ini mengurangi beban server database tujuan.
CatatanAnda hanya dapat mengonfigurasi parameter ini jika Anda memilih Incremental Data Migration untuk parameter Migration Types.
Environment Tag
Tag lingkungan yang digunakan untuk mengidentifikasi instansi DTS. Anda dapat memilih tag lingkungan berdasarkan kebutuhan bisnis Anda. Dalam contoh ini, tidak ada tag lingkungan yang dipilih.
Configure ETL
Menentukan apakah akan mengaktifkan fitur ekstraksi, transformasi, dan pemuatan (ETL). Untuk informasi lebih lanjut, lihat Apa itu ETL? Nilai valid:
Yes: mengonfigurasi fitur ETL. Anda dapat memasukkan pernyataan pemrosesan data di editor kode. Untuk informasi lebih lanjut, lihat Konfigurasi ETL dalam Tugas Migrasi Data atau Tugas Sinkronisasi Data.
No: tidak mengonfigurasi fitur ETL.
Monitoring and Alerting
Menentukan apakah akan mengonfigurasi peringatan untuk tugas migrasi data. Jika tugas gagal atau latensi migrasi melebihi ambang batas yang ditentukan, kontak peringatan menerima notifikasi. Nilai valid:
No: tidak mengonfigurasi peringatan.
Yes: mengonfigurasi peringatan. Dalam hal ini, Anda juga harus mengonfigurasi ambang batas peringatan dan pengaturan notifikasi peringatan. Untuk informasi lebih lanjut, lihat bagian Konfigurasi Pemantauan dan Peringatan saat Membuat Tugas DTS dari topik Konfigurasi Pemantauan dan Peringatan.
Klik Next Step: Data Verification untuk mengonfigurasi tugas verifikasi data.
Untuk informasi lebih lanjut tentang cara menggunakan fitur verifikasi data, lihat Konfigurasi Tugas Verifikasi Data.
Simpan pengaturan tugas dan jalankan pra-pemeriksaan.
Untuk melihat parameter yang harus ditentukan saat Anda memanggil operasi API terkait untuk mengonfigurasi tugas DTS, gerakkan penunjuk di atas Next: Save Task Settings and Precheck dan klik Preview OpenAPI parameters.
Jika Anda tidak perlu melihat atau sudah melihat parameter, klik Next: Save Task Settings and Precheck di bagian bawah halaman.
CatatanSebelum Anda dapat memulai tugas migrasi data, DTS melakukan pra-pemeriksaan. Anda hanya dapat memulai tugas migrasi data setelah tugas lulus pra-pemeriksaan.
Jika tugas gagal lulus pra-pemeriksaan, klik View Details di sebelah setiap item yang gagal. Setelah Anda menganalisis penyebab berdasarkan hasil pemeriksaan, atasi masalah tersebut. Kemudian, jalankan pra-pemeriksaan lagi.
Jika peringatan dipicu untuk suatu item selama pra-pemeriksaan:
Jika item peringatan tidak dapat diabaikan, klik View Details di sebelah item yang gagal dan atasi masalah tersebut. Kemudian, jalankan pra-pemeriksaan lagi.
Jika item peringatan dapat diabaikan, klik Confirm Alert Details. Di kotak dialog Lihat Detail, klik Ignore. Di pesan yang muncul, klik OK. Kemudian, klik Precheck Again untuk menjalankan pra-pemeriksaan lagi. Jika Anda mengabaikan item peringatan, ketidaksesuaian data mungkin terjadi, dan bisnis Anda mungkin terpapar risiko potensial.
Beli instansi.
Tunggu hingga Success Rate menjadi 100%. Kemudian, klik Next: Purchase Instance.
Di halaman Purchase Instance, konfigurasikan parameter Kelas Instansi untuk instansi migrasi data. Tabel berikut menjelaskan parameter.
Bagian
Parameter
Deskripsi
New Instance Class
Resource Group
Grup sumber daya tempat instansi migrasi data milik. Nilai default: default resource group. Untuk informasi lebih lanjut, lihat Apa itu Resource Management?
Instance Class
DTS menyediakan kelas instansi yang bervariasi dalam kecepatan migrasi. Anda dapat memilih kelas instansi berdasarkan skenario bisnis Anda. Untuk informasi lebih lanjut, lihat Kelas instansi dari instansi migrasi data.
Baca dan setujui Data Transmission Service (Pay-as-you-go) Service Terms dengan memilih kotak centang.
Klik Buy and Start. Di pesan yang muncul, klik atau OK.
Anda dapat melihat kemajuan tugas di halaman Data Migration.
CatatanJika tugas migrasi data tidak dapat digunakan untuk memigrasikan data bertahap, tugas secara otomatis berhenti. Status Completed ditampilkan di bagian Status .
Jika tugas migrasi data dapat digunakan untuk memigrasikan data bertahap, tugas tidak berhenti secara otomatis. Tugas migrasi data bertahap tidak pernah berhenti atau selesai. Status Running ditampilkan di bagian Status.