全部产品
Search
文档中心

Data Transmission Service:Migrasi data dari instans PolarDB-X 2.0 ke instans Tablestore

更新时间:Jul 06, 2025

Topik ini menjelaskan cara memigrasikan data dari instans PolarDB-X 2.0 ke instans Tablestore menggunakan Data Transmission Service (DTS).

Prasyarat

  • Instans Tablestore tujuan telah dibuat. Untuk informasi lebih lanjut, lihat Gunakan Tablestore.

  • ID AccessKey dan Rahasia AccessKey akun Alibaba Cloud tempat instans Tablestore berada telah diperoleh. Untuk informasi lebih lanjut, lihat bagian "Buat pasangan AccessKey untuk akun Alibaba Cloud" dalam topik Buat Pasangan AccessKey.

Batasan

Kategori

Deskripsi

Batasan pada database sumber

  • Tabel yang akan dimigrasikan harus memiliki PRIMARY KEY atau batasan UNIQUE dan semua bidang harus unik. Jika tidak, database tujuan mungkin mengandung catatan data duplikat.

  • Jika Anda memilih tabel sebagai objek yang akan dimigrasikan dan ingin mengedit tabel, seperti mengganti nama tabel, hingga 5.000 tabel dapat dimigrasikan dalam satu tugas migrasi data. Jika Anda menjalankan tugas untuk memigrasikan lebih dari 5.000 tabel, kesalahan permintaan terjadi. Dalam hal ini, kami sarankan Anda mengonfigurasi beberapa tugas untuk memigrasikan tabel atau mengonfigurasi tugas untuk memigrasikan seluruh database.

  • Jika nama tabel yang akan dimigrasikan dari instans sumber PolarDB-X 2.0 mengandung huruf kapital, Anda hanya dapat melakukan migrasi skema.

  • Secara default, fitur pencatatan biner diaktifkan untuk instans PolarDB-X 2.0. Pastikan parameter binlog_row_image disetel ke full. Untuk informasi lebih lanjut, lihat Pengaturan parameter. Jika tidak, pesan kesalahan dikembalikan selama pra-pemeriksaan dan tugas migrasi data tidak dapat dimulai.

Batasan lainnya

  • Sebelum Anda memigrasikan data, evaluasi dampak migrasi data terhadap kinerja database sumber dan tujuan. Kami sarankan Anda memigrasikan data selama jam-jam sepi. Selama migrasi data penuh awal, DTS menggunakan sumber daya baca dan tulis database sumber dan tujuan. Hal ini dapat meningkatkan beban pada server database.

  • Selama migrasi data penuh awal, operasi INSERT bersamaan menyebabkan fragmentasi dalam tabel database tujuan. Setelah migrasi data penuh selesai, penggunaan penyimpanan tabel dalam database tujuan lebih besar daripada tabel dalam database sumber.

  • Selama migrasi data, kami sarankan Anda hanya menggunakan DTS untuk menulis data ke database tujuan. Ini mencegah ketidaksesuaian data antara database sumber dan tujuan.

  • Anda dapat memigrasikan hingga 64 tabel ke instans Tablestore. Jika tabel yang dipilih melebihi batas, kesalahan terjadi selama migrasi data. Jika Anda perlu memigrasikan lebih dari 64 tabel ke instans Tablestore, hubungi dukungan teknis Tablestore untuk menaikkan batas jumlah tabel dalam instans Tablestore.

  • Nama tabel dan kolom yang akan dimigrasikan harus sesuai dengan konvensi penamaan instans Tablestore.

    • Nama tabel atau kolom dapat berisi huruf, angka, dan garis bawah (_). Nama tersebut harus dimulai dengan huruf atau garis bawah (_).

    • Nama tabel atau kolom harus memiliki panjang 1 hingga 255 karakter.

Penagihan

Jenis Migrasi

Biaya Konfigurasi Instans

Biaya Lalu Lintas Internet

Migrasi skema dan data penuh

Gratis.

Gratis.

Migrasi data inkremental

Dikenakan biaya. Untuk informasi lebih lanjut, lihat Ikhtisar Penagihan.

Operasi SQL yang dapat dimigrasikan secara inkremental

Jenis Operasi

Pernyataan SQL

DML

INSERT, UPDATE, dan DELETE

Izin yang diperlukan untuk akun database

Database

Migrasi Skema

Migrasi Data Penuh

Migrasi Data Inkremental

Instans Sumber PolarDB-X 2.0

Izin SELECT

Izin SELECT

Izin REPLICATION SLAVE dan REPLICATION CLIENT, serta izin SELECT pada objek yang akan dimigrasikan

Untuk informasi lebih lanjut tentang cara membuat akun database dan memberikan izin kepada akun database, lihat topik-topik berikut:

Instans PolarDB-X 2.0: Kelola Akun Database dan Izin yang Diperlukan untuk Akun agar Dapat Mensinkronkan Data.

Prosedur

  1. Klik Create Task. Di wizard Buat Tugas, konfigurasikan database sumber dan tujuan.

    Bagian

    Parameter

    Deskripsi

    T/A

    Task Name

    Nama tugas DTS. DTS secara otomatis menghasilkan nama tugas. Kami sarankan Anda menentukan nama deskriptif yang memudahkan identifikasi tugas. Anda tidak perlu menentukan nama tugas yang unik.

    Source Database

    Select an existing DMS database instance. (Optional. If you have not registered a DMS database instance, ignore this option and configure database settings in the section below.)

    Database yang ingin Anda gunakan. Anda dapat memilih apakah akan menggunakan database yang ada berdasarkan kebutuhan bisnis Anda.

    • Jika Anda memilih database yang ada, DTS secara otomatis mengisi parameter untuk database tersebut.

    • Jika Anda tidak memilih database yang ada, Anda harus mengonfigurasi informasi database berikut.

    Database Type

    Jenis database sumber. Pilih PolarDB-X 2.0.

    Access Method

    Metode akses database sumber. Pilih Alibaba Cloud Instance.

    Instance Region

    Wilayah tempat instans sumber PolarDB-X 2.0 berada.

    Replicate Data Across Alibaba Cloud Accounts

    Menentukan apakah akan memigrasikan data antar akun Alibaba Cloud. Dalam contoh ini, No dipilih.

    Instance ID

    ID instans sumber PolarDB-X 2.0.

    Database Account

    Akun database instans sumber PolarDB-X 2.0. Untuk informasi lebih lanjut tentang izin yang diperlukan, lihat bagian Izin yang Diperlukan untuk Akun Database dalam topik ini.

    Database Password

    Kata sandi yang digunakan untuk mengakses database.

    Destination Database

    Select an existing DMS database instance. (Optional. If you have not registered a DMS database instance, ignore this option and configure database settings in the section below.)

    Database yang ingin Anda gunakan. Anda dapat memilih apakah akan menggunakan database yang ada berdasarkan kebutuhan bisnis Anda.

    • Jika Anda memilih database yang ada, DTS secara otomatis mengisi parameter untuk database tersebut.

    • Jika Anda tidak memilih database yang ada, Anda harus mengonfigurasi informasi database berikut.

    Database Type

    Jenis database tujuan. Pilih Tablestore.

    Access Method

    Metode akses database tujuan. Pilih Alibaba Cloud Instance.

    Instance Region

    Wilayah tempat database Tablestore tujuan berada.

    Instance ID

    ID instans Tablestore tujuan.

    AccessKey ID of Alibaba Cloud Account

    ID AccessKey akun Alibaba Cloud tempat instans Tablestore tujuan berada.

    Penting

    Jika Anda memasukkan ID AccessKey Pengguna Resource Access Management (RAM), tugas migrasi data mungkin gagal karena pengguna RAM tidak diberikan izin yang diperlukan.

    AccessKey Secret of Alibaba Cloud Account

    Rahasia AccessKey akun Alibaba Cloud tempat instans Tablestore tujuan berada.

  2. Di bagian bawah halaman, klik Test Connectivity and Proceed.

    Jika database sumber atau tujuan adalah instans database Alibaba Cloud, seperti instans ApsaraDB RDS for MySQL atau ApsaraDB for MongoDB, DTS secara otomatis menambahkan blok CIDR server DTS ke daftar putih alamat IP instans tersebut. Jika database sumber atau tujuan adalah database mandiri yang dihosting pada instans Elastic Compute Service (ECS), DTS secara otomatis menambahkan blok CIDR server DTS ke aturan grup keamanan instans ECS, dan Anda harus memastikan bahwa instans ECS dapat mengakses database. Jika database mandiri dihosting pada beberapa instans ECS, Anda harus secara manual menambahkan blok CIDR server DTS ke aturan grup keamanan setiap instans ECS. Jika database sumber atau tujuan adalah database mandiri yang ditempatkan di pusat data atau disediakan oleh penyedia layanan cloud pihak ketiga, Anda harus secara manual menambahkan blok CIDR server DTS ke daftar putih alamat IP database untuk mengizinkan DTS mengakses database. Untuk informasi lebih lanjut, lihat bagian Blok CIDR Server DTS dalam topik Tambahkan Blok CIDR Server DTS.

    Peringatan

    Jika blok CIDR publik server DTS secara otomatis atau manual ditambahkan ke daftar putih instans database atau ke aturan grup keamanan instans ECS, risiko keamanan mungkin timbul. Oleh karena itu, sebelum Anda menggunakan DTS untuk memigrasikan data, Anda harus memahami dan mengakui potensi risiko dan mengambil langkah-langkah pencegahan, termasuk tetapi tidak terbatas pada langkah-langkah berikut: memperkuat keamanan nama pengguna dan kata sandi Anda, membatasi port yang diekspos, mengotentikasi panggilan API, secara teratur memeriksa daftar putih atau aturan grup keamanan dan melarang blok CIDR yang tidak sah, atau menghubungkan instans database ke DTS dengan menggunakan Express Connect, VPN Gateway, atau Smart Access Gateway.

  3. Konfigurasikan objek yang akan dimigrasikan dan pengaturan lanjutan.

    Parameter

    Deskripsi

    Migration Types

    • Untuk hanya melakukan migrasi data penuh, pilih Schema Migration dan Full Data Migration.

    • Untuk memastikan kontinuitas layanan selama migrasi data, pilih Schema Migration, Full Data Migration, dan Incremental Data Migration.

    Catatan
    • Jika Anda tidak memilih Schema Migration, pastikan database dan tabel dibuat dalam database tujuan untuk menerima data dan fitur pemetaan nama objek diaktifkan dalam Selected Objects.

    • Jika Anda tidak memilih Incremental Data Migration, kami sarankan Anda tidak menulis data ke database sumber selama migrasi data. Ini memastikan konsistensi data antara database sumber dan tujuan.

    Processing Mode of Conflicting Tables

    • Precheck and Report Errors: memeriksa apakah database tujuan berisi tabel yang menggunakan nama yang sama dengan tabel di database sumber. Jika database sumber dan tujuan tidak berisi tabel dengan nama tabel identik, pra-pemeriksaan berhasil dilewati. Jika tidak, kesalahan akan dikembalikan selama pra-pemeriksaan dan tugas migrasi data tidak dapat dimulai.

      Catatan

      Jika database sumber dan tujuan berisi tabel dengan nama identik dan tabel dalam database tujuan tidak dapat dihapus atau diganti namanya, Anda dapat menggunakan fitur pemetaan nama objek untuk mengganti nama tabel yang dimigrasikan ke database tujuan. Untuk informasi lebih lanjut, lihat Pemetaan nama objek.

    • Ignore Errors and Proceed: melewati pra-pemeriksaan untuk nama tabel identik di database sumber dan tujuan.

      Peringatan

      Jika Anda memilih Ignore Errors and Proceed, ketidaksesuaian data mungkin terjadi dan bisnis Anda mungkin terpapar risiko potensial berikut:

      • Jika database sumber dan tujuan memiliki skema yang sama, dan catatan data memiliki kunci utama yang sama dengan catatan data yang ada di database tujuan, skenario berikut mungkin terjadi:

        • Selama migrasi data penuh, DTS tidak memigrasikan catatan data ke database tujuan. Catatan data yang ada di database tujuan dipertahankan.

        • Selama migrasi data inkremental, DTS memigrasikan catatan data ke database tujuan. Catatan data yang ada di database tujuan ditimpa.

      • Jika database sumber dan tujuan memiliki skema yang berbeda, hanya kolom tertentu yang dimigrasikan atau tugas migrasi data gagal. Lanjutkan dengan hati-hati.

    Operation Types

    Jenis operasi yang dapat dimigrasikan. Pilih jenis operasi yang ingin Anda migrasikan berdasarkan kebutuhan bisnis Anda. Semua jenis operasi dipilih secara default.

    Processing Policy of Dirty Data

    Kebijakan pemrosesan untuk menangani kesalahan penulisan data. Nilai valid:

    • Skip

    • Block

    Data Write Mode

    Mode di mana data ditulis. Nilai valid:

    • Overwrite Row: Operasi UpdateRowChange dilakukan untuk menimpa baris di instans Tablestore.

    • Update Row: Operasi PutRowChange dilakukan untuk memperbarui baris di instans Tablestore.

    Batch Write Mode

    Operasi yang digunakan untuk menulis beberapa baris data ke instans Tablestore sekaligus. Nilai valid:

    • BulkImportRequest: Data ditulis secara offline.

    • BatchWriteRowRequest: Data ditulis dalam batch.

    Catatan

    Untuk mencapai efisiensi baca dan tulis yang lebih tinggi serta mengurangi biaya penggunaan instans Tablestore, kami sarankan Anda memilih BulkImportRequest.

    More

    Anda dapat mengklik More untuk mengonfigurasi parameter berikut berdasarkan kebutuhan bisnis Anda:

    • Queue Size: panjang antrian untuk menulis data ke instans Tablestore.

    • Thread Quantity: jumlah thread callback untuk menulis data ke instans Tablestore.

    • Concurrency: jumlah maksimum thread konkuren untuk menulis data ke instans Tablestore.

    • Buckets: jumlah maksimum bucket konkuren untuk menulis data inkremental ke instans Tablestore.

      Catatan

      Nilai parameter Buckets harus kurang dari atau sama dengan nilai parameter Concurrency.

    Capitalization of Object Names in Destination Instance

    Kapitalisasi nama database, nama tabel, dan nama kolom di instans tujuan. Secara default, DTS default policy dipilih. Anda dapat memilih opsi lain untuk memastikan bahwa kapitalisasi nama objek konsisten dengan database sumber atau tujuan. Untuk informasi lebih lanjut, lihat Tentukan kapitalisasi nama objek di instans tujuan.

    Source Objects

    Pilih satu atau lebih objek dari bagian Source Objects. Klik ikon 向右小箭头 untuk menambahkan objek ke bagian Selected Objects.

    Catatan
    • Anda dapat memilih tabel atau database sebagai objek yang akan dimigrasikan. Jika Anda memilih tabel sebagai objek yang akan dimigrasikan, DTS tidak memigrasikan objek lain seperti view, trigger, dan prosedur tersimpan ke database tujuan.

    • Jika Anda memilih Tablestore sebagai jenis database tujuan, Anda hanya dapat memigrasikan tabel dalam satu database. Ini menunjukkan bahwa Anda hanya dapat memilih satu database atau beberapa tabel dalam database yang sama sebagai objek yang akan dimigrasikan.

    Selected Objects

    • Untuk mengganti nama objek yang ingin Anda migrasikan ke instans tujuan, klik kanan objek di bagian Selected Objects. Untuk informasi lebih lanjut, lihat Pemetaan nama objek tunggal.

    • Untuk mengganti nama beberapa objek sekaligus, klik Batch Edit di sudut kanan atas bagian Selected Objects. Untuk informasi lebih lanjut, lihat Pemetaan beberapa nama objek sekaligus.

    Catatan
    • Fitur pemetaan nama database tidak didukung. Anda dapat menggunakan fitur pemetaan nama objek untuk mengganti nama tabel dan kolom hanya jika Anda memilih tabel sebagai objek yang akan dimigrasikan. Jika Anda menggunakan fitur pemetaan nama objek untuk mengganti nama objek, objek lain yang bergantung pada objek tersebut mungkin gagal dimigrasikan.

    • Anda dapat mengubah tipe kolom dalam tabel yang dimigrasikan ke instans Tablestore dengan menggunakan fitur pemetaan nama kolom.

    • Untuk menentukan kondisi untuk menyaring data, klik kanan tabel di bagian Selected Objects. Di kotak dialog yang muncul, tentukan kondisi tersebut. Untuk informasi lebih lanjut, lihat Gunakan kondisi SQL untuk menyaring data.

  4. Klik Next: Advanced Settings untuk mengonfigurasi pengaturan lanjutan.

    Parameter

    Deskripsi

    Dedicated Cluster for Task Scheduling

    Secara default, DTS menjadwalkan tugas migrasi data ke klaster bersama jika Anda tidak menentukan klaster khusus. Jika Anda ingin meningkatkan stabilitas tugas migrasi data, belilah klaster khusus. Untuk informasi lebih lanjut, lihat Apa Itu Klaster Khusus DTS.

    Set Alerts

    Menentukan apakah akan mengonfigurasi peringatan untuk tugas migrasi data. Jika tugas gagal atau latensi migrasi melebihi ambang batas yang ditentukan, kontak peringatan menerima notifikasi. Nilai valid:

    • No: Tidak mengonfigurasi peringatan.

    • Yes: mengonfigurasi peringatan. Dalam hal ini, Anda juga harus mengonfigurasi ambang batas peringatan dan pengaturan notifikasi peringatan. Untuk informasi lebih lanjut, lihat bagian Konfigurasikan Pemantauan dan Peringatan saat Membuat Tugas DTS dalam topik Konfigurasikan Pemantauan dan Peringatan.

    Retry Time for Failed Connections

    Rentang waktu ulang untuk koneksi gagal. Jika database sumber atau tujuan gagal terhubung setelah tugas migrasi data dimulai, DTS segera mencoba kembali koneksi dalam rentang waktu ulang. Nilai valid: 10 hingga 1.440. Unit: menit. Nilai default: 720. Kami sarankan Anda menetapkan parameter ini ke nilai lebih besar dari 30. Jika DTS terhubung kembali ke database sumber dan tujuan dalam rentang waktu ulang yang ditentukan, DTS melanjutkan tugas migrasi data. Jika tidak, tugas migrasi data gagal.

    Catatan
    • Jika Anda menentukan rentang waktu ulang yang berbeda untuk beberapa tugas migrasi data yang berbagi database sumber atau tujuan yang sama, nilai yang ditentukan kemudian akan mengambil alih.

    • Saat DTS mencoba kembali koneksi, Anda dikenakan biaya untuk instans DTS. Kami sarankan Anda menentukan rentang waktu ulang berdasarkan kebutuhan bisnis Anda. Anda juga dapat melepaskan instans DTS sesegera mungkin setelah database sumber dan instans tujuan dilepaskan.

    Retry Time for Other Issues

    Rentang waktu ulang untuk masalah lainnya. Misalnya, jika operasi DDL atau DML gagal dilakukan setelah tugas migrasi data dimulai, DTS segera mencoba kembali operasi dalam rentang waktu ulang. Nilai valid: 1 hingga 1440. Unit: menit. Nilai default: 10. Kami sarankan Anda menetapkan parameter ini ke nilai lebih besar dari 10. Jika operasi gagal berhasil dilakukan dalam rentang waktu ulang yang ditentukan, DTS melanjutkan tugas migrasi data. Jika tidak, tugas migrasi data gagal.

    Penting

    Nilai parameter Retry Time for Other Issues harus lebih kecil dari nilai parameter Retry Time for Failed Connections.

    Enable Throttling for Full Data Migration

    Menentukan apakah akan mengaktifkan pembatasan untuk migrasi data penuh. Selama migrasi data penuh, DTS menggunakan sumber daya baca dan tulis database sumber dan tujuan. Hal ini dapat meningkatkan beban server database. Anda dapat mengaktifkan pembatasan untuk migrasi data penuh berdasarkan kebutuhan bisnis Anda. Untuk mengonfigurasi pembatasan, Anda harus mengonfigurasi parameter Queries per second (QPS) to the source database, RPS of Full Data Migration, dan Data migration speed for full migration (MB/s). Ini mengurangi beban server database tujuan.

    Catatan

    Anda hanya dapat mengonfigurasi parameter ini jika Anda memilih Full Data Migration untuk parameter Migration Types.

    Enable Throttling for Incremental Data Migration

    Menentukan apakah akan mengaktifkan pembatasan untuk migrasi data inkremental. Untuk mengonfigurasi pembatasan, Anda harus mengonfigurasi parameter RPS of Incremental Data Migration dan Data migration speed for incremental migration (MB/s). Ini mengurangi beban server database tujuan.

    Catatan

    Anda hanya dapat mengonfigurasi parameter ini jika Anda memilih Incremental Data Migration untuk parameter Migration Types.

    Environment Tag

    Tag lingkungan yang digunakan untuk mengidentifikasi instans DTS. Anda dapat memilih tag lingkungan berdasarkan kebutuhan bisnis Anda. Dalam contoh ini, tidak ada tag lingkungan yang dipilih.

    Configure ETL

    Fitur ekstraksi, transformasi, dan pemuatan (ETL) tidak didukung. Oleh karena itu, No dipilih.

    Whether to delete SQL operations on heartbeat tables of forward and reverse tasks

  5. Klik Next: Configure Database and Table Fields. Di kotak dialog Note yang muncul, klik OK.

    Secara default, kolom kunci utama tabel dipilih sebagai nilai parameter Primary Key Column oleh DTS ketika tabel dimigrasikan ke instans Tablestore. Untuk memodifikasi parameter Kolom Kunci Utama, atur parameter Definition Status ke All.

    Catatan

    Anda dapat memilih beberapa kolom untuk parameter Primary Key Column dari daftar drop-down untuk menghasilkan kunci utama komposit.

  6. Simpan pengaturan tugas dan jalankan pra-pemeriksaan.

    • Untuk melihat parameter yang harus ditentukan saat Anda memanggil operasi API terkait untuk mengonfigurasi tugas DTS, gerakkan pointer ke Next: Save Task Settings and Precheck dan klik Preview OpenAPI parameters.

    • Jika Anda tidak perlu melihat atau telah melihat parameter tersebut, klik Next: Save Task Settings and Precheck di bagian bawah halaman.

    Catatan
    • Sebelum Anda dapat memulai tugas migrasi data, DTS melakukan pra-pemeriksaan. Anda hanya dapat memulai tugas migrasi data setelah tugas tersebut lolos pra-pemeriksaan.

    • Jika tugas gagal melewati pra-pemeriksaan, klik View Details di sebelah setiap item yang gagal. Setelah Anda menganalisis penyebab berdasarkan hasil pemeriksaan, atasi masalah tersebut. Kemudian, jalankan pra-pemeriksaan lagi.

    • Jika peringatan dipicu untuk suatu item selama pra-pemeriksaan:

      • Jika item peringatan tidak dapat diabaikan, klik View Details di sebelah item yang gagal dan atasi masalah tersebut. Kemudian, jalankan pra-pemeriksaan lagi.

      • Jika item peringatan dapat diabaikan, klik Confirm Alert Details. Di kotak dialog Lihat Detail, klik Ignore. Di pesan yang muncul, klik OK. Kemudian, klik Precheck Again untuk menjalankan pra-pemeriksaan lagi. Jika Anda mengabaikan item peringatan, ketidaksesuaian data mungkin terjadi, dan bisnis Anda mungkin terpapar risiko potensial.

  7. Tunggu hingga Success Rate menjadi 100%. Kemudian, klik Next: Purchase Instance.

  8. Di halaman Purchase Instance, konfigurasikan parameter Kelas Instans untuk instans migrasi data. Tabel berikut menjelaskan parameter.

    Bagian

    Parameter

    Deskripsi

    New Instance Class

    Resource Group

    Grup sumber daya tempat instans migrasi data berada. Nilai default: default resource group. Untuk informasi lebih lanjut, lihat Apa itu Resource Management?

    Instance Class

    DTS menyediakan kelas instans yang bervariasi dalam kecepatan migrasi. Anda dapat memilih kelas instans berdasarkan skenario bisnis Anda. Untuk informasi lebih lanjut, lihat Kelas instans tugas migrasi data.

  9. Baca dan setujui Data Transmission Service (Pay-as-you-go) Service Terms dengan memilih kotak centang.

  10. Klik Buy and Start. Di pesan yang muncul, klik OK.

    Anda dapat melihat kemajuan tugas di halaman Data Migration.

    Catatan
    • Jika tugas migrasi data tidak dapat digunakan untuk memigrasikan data inkremental, tugas tersebut secara otomatis berhenti. Completed ditampilkan di bagian Status .

    • Jika tugas migrasi data dapat digunakan untuk memigrasikan data inkremental, tugas tersebut tidak akan berhenti secara otomatis. Tugas migrasi data inkremental tidak pernah berhenti atau selesai. Running ditampilkan di bagian Status.