Tablestore：Sinkronkan data dari PolarDB-X 2.0 ke Tablestore

Prasyarat

• Sebuah instance Tablestore telah dibuat. Untuk informasi lebih lanjut, lihat Buat instance Tablestore.

• ID AccessKey dan Rahasia AccessKey dari akun Alibaba Cloud yang memiliki instance Tablestore telah diperoleh. Untuk informasi lebih lanjut, lihat Buat pasangan AccessKey.

Catatan Penggunaan

Operasi SQL yang dapat disinkronkan secara bertahap

Prosedur

1. Pergi ke halaman Tugas Sinkronisasi Data.

   1. Masuk ke Konsol Manajemen Data (DMS).

   2. Di bilah navigasi atas, klik Data Development.

   3. Di panel navigasi sisi kiri, pilih DTS (DTS) > Data Synchronization.

   4. Di sebelah kanan Data Synchronization Tasks, pilih wilayah tempat Anda ingin membuat tugas sinkronisasi data.

   Catatan

   • Langkah-langkah aktual yang perlu Anda lakukan mungkin berbeda berdasarkan mode dan tata letak konsol DMS. Untuk informasi lebih lanjut, lihat Mode Sederhana dan Sesuaikan tata letak dan gaya konsol DMS.

   • Anda juga bisa pergi ke Halaman Tugas Sinkronisasi Data Konsol DTS Baru.

2. Klik Create Task untuk pergi ke halaman konfigurasi tugas.

   1. Opsional: Di sudut kanan atas halaman, klik New Configuration Page.

      Catatan

      • Jika tombol Back to Previous Version ditampilkan di sudut kanan atas halaman, lewati langkah ini.

      • Parameter tertentu di halaman konfigurasi versi baru dan sebelumnya mungkin berbeda. Kami sarankan Anda menggunakan halaman konfigurasi versi baru.

   2. Konfigurasikan database sumber dan tujuan. Tabel berikut menjelaskan parameter.

      Bagian	Parameter	Deskripsi
      N/A	Task Name	Nama tugas DTS. DTS secara otomatis menghasilkan nama tugas. Kami sarankan Anda menentukan nama deskriptif yang memudahkan identifikasi tugas. Anda tidak perlu menentukan nama tugas unik.
      Source Database	Select an existing DMS database instance. (Optional. If you have not registered a DMS database instance, ignore this option and configure database settings in the section below.)	Database yang ingin Anda gunakan. Anda dapat memilih apakah akan menggunakan database yang ada berdasarkan kebutuhan bisnis Anda. Jika Anda memilih database yang ada, DTS secara otomatis mengisi parameter untuk database tersebut. Jika Anda tidak memilih database yang ada, Anda harus mengonfigurasi informasi database berikut.
      	Database Type	Jenis database sumber. Pilih PolarDB-X 2.0.
      	Access Method	Metode akses database sumber. Pilih Alibaba Cloud Instance.
      	Instance Region	Wilayah tempat instance PolarDB-X 2.0 berada.
      	Replicate Data Across Alibaba Cloud Accounts	Menentukan apakah akan menyinkronkan data antar akun Alibaba Cloud. Dalam contoh ini, No dipilih. Untuk informasi tentang sinkronisasi data antar akun Alibaba Cloud, lihat Konfigurasikan tugas DTS antar akun Alibaba Cloud.
      	Instance ID	ID instance PolarDB-X 2.0 sumber.
      	Database Account	Akun database instance PolarDB-X 2.0 sumber. Akun database harus memiliki izin untuk melakukan operasi SELECT, REPLICATION SLAVE, dan REPLICATION CLIENT pada objek yang ingin Anda sinkronkan. Catatan Untuk informasi tentang cara memberikan izin yang diperlukan kepada akun database, lihat Kelola akun database dan Izin yang diperlukan untuk akun untuk menyinkronkan data.
      	Database Password	Kata sandi yang digunakan untuk mengakses database.
      Destination Database	Select an existing DMS database instance. (Optional. If you have not registered a DMS database instance, ignore this option and configure database settings in the section below.)	Database yang ingin Anda gunakan. Anda dapat memilih apakah akan menggunakan database yang ada berdasarkan kebutuhan bisnis Anda. Jika Anda memilih database yang ada, DTS secara otomatis mengisi parameter untuk database tersebut. Jika Anda tidak memilih database yang ada, Anda harus mengonfigurasi informasi database berikut.
      	Database Type	Jenis database tujuan. Pilih Tablestore.
      	Access Method	Metode akses database tujuan. Pilih Alibaba Cloud Instance.
      	Instance Region	Wilayah tempat instance Tablestore tujuan berada.
      	Instance ID	ID instance Tablestore tujuan.
      	AccessKey ID of Alibaba Cloud Account	ID AccessKey akun Alibaba Cloud yang memiliki instance Tablestore tujuan. Penting Jika Anda memasukkan ID AccessKey pengguna RAM, Anda harus melampirkan kebijakan AliyunOTSFullAccess ke pengguna RAM. Kebijakan AliyunOTSFullAccess memberikan izin kepada pengguna RAM untuk mengelola Tablestore. Untuk informasi lebih lanjut, lihat Gunakan kebijakan RAM untuk memberikan izin kepada pengguna RAM.
      	AccessKey Secret of Alibaba Cloud Account	Rahasia AccessKey akun Alibaba Cloud yang memiliki instance Tablestore tujuan.

   3. Di bagian bawah halaman, klik Test Connectivity and Proceed.

      Jika database sumber atau tujuan adalah instance database Alibaba Cloud, seperti instance ApsaraDB RDS for MySQL atau ApsaraDB for MongoDB, DTS secara otomatis menambahkan blok CIDR server DTS ke daftar putih instance tersebut. Jika database sumber atau tujuan adalah database yang dikelola sendiri yang di-hosting pada instance Elastic Compute Service (ECS), DTS secara otomatis menambahkan blok CIDR server DTS ke aturan grup keamanan instance ECS, dan Anda harus memastikan bahwa instance ECS dapat mengakses database. Jika database diterapkan pada beberapa instance ECS, Anda harus secara manual menambahkan blok CIDR server DTS ke aturan grup keamanan setiap instance ECS. Jika database sumber atau tujuan adalah database yang dikelola sendiri yang diterapkan di pusat data atau disediakan oleh penyedia layanan cloud pihak ketiga, Anda harus secara manual menambahkan blok CIDR server DTS ke daftar putih database untuk mengizinkan DTS mengakses database. Untuk informasi lebih lanjut, lihat bagian "Blok CIDR server DTS" dari topik Tambahkan Blok CIDR Server DTS.

      Peringatan

      Jika blok CIDR publik server DTS secara otomatis atau manual ditambahkan ke daftar putih instance database atau ke aturan grup keamanan instance ECS, risiko keamanan mungkin timbul. Oleh karena itu, sebelum Anda menggunakan DTS untuk menyinkronkan data, Anda harus memahami dan mengakui potensi risiko serta mengambil tindakan pencegahan, termasuk tetapi tidak terbatas pada tindakan berikut: meningkatkan keamanan nama pengguna dan kata sandi Anda, membatasi port yang diekspos, mengotentikasi panggilan API, secara teratur memeriksa daftar putih atau aturan grup keamanan dan melarang blok CIDR yang tidak sah, atau menghubungkan instance database ke DTS dengan menggunakan Express Connect, VPN Gateway, atau Smart Access Gateway.

3. Konfigurasikan objek yang ingin Anda sinkronkan dalam tugas sinkronisasi data.

   1. Di halaman Configure Objects, konfigurasikan objek yang ingin Anda sinkronkan. Tabel berikut menjelaskan parameter.

      Parameter	Deskripsi
      Synchronization Types	Jenis sinkronisasi. Secara default, Incremental Data Synchronization dipilih. Anda juga harus memilih Schema Synchronization dan Full Data Synchronization. Setelah pra-pemeriksaan selesai, DTS menyinkronkan data historis objek yang dipilih dari database sumber ke klaster tujuan. Data historis ini menjadi dasar untuk sinkronisasi inkremental berikutnya.
      Processing Mode of Conflicting Tables	Precheck and Report Errors: memeriksa apakah database tujuan berisi tabel dengan nama yang sama dengan tabel di database sumber. Jika database sumber dan tujuan tidak berisi tabel dengan nama identik, pra-pemeriksaan berhasil. Jika tidak, kesalahan akan dikembalikan selama pra-pemeriksaan, dan tugas sinkronisasi data tidak dapat dimulai. Catatan Jika database sumber dan tujuan berisi tabel dengan nama identik dan tabel di database tujuan tidak dapat dihapus atau diganti namanya, Anda dapat menggunakan fitur pemetaan nama objek untuk mengganti nama tabel yang disinkronkan ke database tujuan. Untuk informasi lebih lanjut, lihat Peta nama objek. Ignore Errors and Proceed: melewati pra-pemeriksaan untuk nama tabel identik di database sumber dan tujuan. Peringatan Jika Anda memilih Ignore Errors and Proceed, ketidaksesuaian data mungkin terjadi dan bisnis Anda mungkin terpapar risiko potensial. Jika database sumber dan tujuan memiliki skema yang sama dan catatan data di database tujuan memiliki nilai kunci utama atau nilai kunci unik yang sama dengan catatan data di database sumber: Selama sinkronisasi data penuh, DTS tidak menyinkronkan catatan data ke database tujuan. Catatan data yang ada di database tujuan tetap dipertahankan. Selama sinkronisasi data inkremental, DTS menyinkronkan catatan data ke database tujuan. Catatan data yang ada di database tujuan ditimpa. Jika database sumber dan tujuan memiliki skema yang berbeda, data mungkin gagal diinisialisasi. Dalam hal ini, hanya beberapa kolom yang disinkronkan, atau instance sinkronisasi data gagal. Lanjutkan dengan hati-hati.
      Operation Types	Jenis operasi yang ingin Anda sinkronkan. Pilih jenis operasi yang ingin Anda sinkronkan berdasarkan kebutuhan bisnis Anda. Secara default, semua jenis operasi dipilih.
      Processing Policy of Dirty Data	Kebijakan pemrosesan untuk menangani kesalahan penulisan data. Nilai valid: Skip Block
      Data Write Mode	Mode penulisan data. Nilai valid: Overwrite Row: Operasi UpdateRowChange dilakukan untuk menimpa baris di instance Tablestore. Update Row: Operasi PutRowChange dilakukan untuk memperbarui baris di instance Tablestore.
      Batch Write Mode	Operasi yang digunakan untuk menulis beberapa baris data ke instance Tablestore secara bersamaan. Nilai valid: BulkImportRequest: Data ditulis secara offline. BatchWriteRowRequest: Menulis beberapa baris data secara bersamaan. Catatan Untuk mencapai efisiensi baca dan tulis yang lebih tinggi serta mengurangi biaya penggunaan instance Tablestore, kami sarankan Anda memilih BulkImportRequest.
      More	Anda dapat mengklik More untuk mengonfigurasi parameter berikut berdasarkan kebutuhan bisnis Anda: Queue Size: panjang antrian untuk menulis data ke instance Tablestore. Thread Quantity: jumlah thread panggilan balik untuk menulis data ke instance Tablestore. Concurrency: jumlah maksimum thread konkuren untuk instance Tablestore. Buckets: jumlah bucket tempat data inkremental dapat ditulis secara bersamaan dalam urutan. Untuk meningkatkan kemampuan penulisan konkuren, Anda dapat mengatur parameter ini ke nilai besar. Catatan Nilai parameter Buckets harus kurang dari atau sama dengan nilai parameter Concurrency.
      Capitalization of Object Names in Destination Instance	Huruf besar/kecil nama database, tabel, dan kolom di instance tujuan. Secara default, DTS default policy dipilih. Anda dapat memilih opsi lain untuk memastikan bahwa huruf besar/kecil nama objek konsisten dengan yang ada di database sumber atau tujuan. Untuk informasi lebih lanjut, lihat Tentukan huruf besar/kecil nama objek di instance tujuan.
      Source Objects	Pilih satu atau lebih objek dari bagian Source Objects dan klik ikon untuk menambahkan objek ke bagian Selected Objects. Catatan Anda dapat memilih tabel atau database sebagai objek yang ingin Anda sinkronkan. Jika Anda memilih tabel sebagai objek yang ingin Anda sinkronkan, DTS tidak akan menyinkronkan objek lainnya, seperti view, trigger, dan prosedur tersimpan, ke database tujuan. Anda dapat memilih hanya satu database atau beberapa tabel dalam database yang sama sebagai objek yang ingin Anda sinkronkan.
      Selected Objects	Untuk mengganti nama objek yang ingin Anda sinkronkan ke instance tujuan, klik kanan objek di bagian Selected Objects. Untuk informasi lebih lanjut, lihat bagian "Peta nama objek tunggal" dari topik Peta nama objek. Untuk mengganti nama beberapa objek sekaligus, klik Batch Edit di sudut kanan atas bagian Selected Objects. Untuk informasi lebih lanjut, lihat bagian "Peta beberapa nama objek sekaligus" dari topik Peta nama objek. Catatan Fitur pemetaan nama database tidak didukung. Anda dapat menggunakan fitur pemetaan nama objek untuk mengganti nama tabel dan kolom hanya jika Anda memilih tabel sebagai objek yang ingin Anda sinkronkan. Jika Anda menggunakan fitur pemetaan nama objek untuk mengganti nama objek, objek lain yang bergantung pada objek tersebut mungkin gagal disinkronkan. Anda dapat menggunakan fitur pemetaan nama kolom untuk memodifikasi tipe data kolom yang sesuai di instance Tablestore tujuan. Untuk menentukan kondisi WHERE untuk memfilter data, klik kanan tabel di bagian Selected Objects. Di kotak dialog yang muncul, tentukan kondisi tersebut. Untuk informasi lebih lanjut, lihat Tentukan kondisi filter.

   2. Klik Next: Advanced Settings untuk mengonfigurasi pengaturan lanjutan. Tabel berikut menjelaskan parameter.

      Parameter	Deskripsi
      Dedicated Cluster for Task Scheduling	Secara default, DTS menjadwalkan tugas ke klaster bersama jika Anda tidak menentukan klaster khusus. Jika Anda ingin meningkatkan stabilitas instance sinkronisasi data, beli klaster khusus. Untuk informasi lebih lanjut, lihat Apa itu klaster khusus DTS.
      Retry Time for Failed Connections	Rentang waktu ulang untuk koneksi gagal. Jika database sumber atau tujuan gagal terhubung setelah tugas sinkronisasi data dimulai, DTS segera mencoba kembali koneksi dalam rentang waktu tersebut. Nilai valid: 10 hingga 1440. Unit: menit. Nilai default: 720. Kami sarankan Anda mengatur parameter ini ke nilai lebih dari 30. Jika DTS berhasil terhubung kembali ke database sumber dan tujuan dalam rentang waktu yang ditentukan, DTS melanjutkan tugas sinkronisasi data. Jika tidak, tugas sinkronisasi data gagal. Catatan Jika Anda menentukan rentang waktu ulang yang berbeda untuk beberapa tugas sinkronisasi data yang memiliki database sumber atau tujuan yang sama, rentang waktu ulang terpendek yang diambil. Ketika DTS mencoba kembali koneksi, Anda akan dikenakan biaya untuk instance DTS. Kami sarankan Anda menentukan rentang waktu ulang berdasarkan kebutuhan bisnis Anda. Anda juga dapat melepaskan instance DTS pada kesempatan pertama setelah instance sumber dan tujuan dilepaskan.
      Retry Time for Other Issues	Rentang waktu ulang untuk masalah lainnya. Misalnya, jika operasi DDL atau DML gagal dilakukan setelah tugas sinkronisasi data dimulai, DTS segera mencoba kembali operasi dalam rentang waktu tersebut. Nilai valid: 1 hingga 1440. Unit: menit. Nilai default: 10. Kami sarankan Anda mengatur parameter ini ke nilai lebih dari 10. Jika operasi gagal berhasil dilakukan dalam rentang waktu yang ditentukan, DTS melanjutkan tugas sinkronisasi data. Jika tidak, tugas sinkronisasi data gagal. Penting Nilai parameter Retry Time for Other Issues harus lebih kecil dari nilai parameter Retry Time for Failed Connections.
      Enable Throttling for Full Data Synchronization	Selama sinkronisasi data penuh, DTS menggunakan sumber daya baca dan tulis dari database sumber dan tujuan. Hal ini dapat meningkatkan beban pada server database. Anda dapat mengonfigurasi parameter Queries per second (QPS) to the source database, RPS of Full Data Migration, dan Data migration speed for full migration (MB/s) untuk tugas sinkronisasi data penuh untuk mengurangi beban pada server database tujuan. Catatan Anda hanya dapat mengonfigurasi parameter ini jika Full Data Synchronization dipilih untuk parameter Synchronization Types.
      Enable Throttling for Incremental Data Synchronization	Menentukan apakah akan mengaktifkan pembatasan untuk sinkronisasi data inkremental. Anda dapat mengaktifkan pembatasan untuk sinkronisasi data inkremental berdasarkan kebutuhan bisnis Anda. Untuk mengonfigurasi pembatasan, Anda harus mengonfigurasi parameter RPS of Incremental Data Synchronization dan Data synchronization speed for incremental synchronization (MB/s). Ini mengurangi beban pada server database tujuan.
      Environment Tag	Tag lingkungan yang digunakan untuk mengidentifikasi instance DTS. Anda dapat memilih tag lingkungan berdasarkan kebutuhan bisnis Anda. Dalam contoh ini, Anda tidak perlu mengonfigurasi parameter ini.
      Configure ETL	Fitur ekstraksi, transformasi, dan pemuatan (ETL) tidak didukung. Dalam hal ini, No dipilih.
      Whether to delete SQL operations on heartbeat tables of forward and reverse tasks	Menentukan apakah akan menulis operasi SQL pada tabel denyut nadi ke database sumber saat instance DTS sedang berjalan. Nilai valid: Yes: tidak menulis operasi SQL pada tabel denyut nadi. Dalam hal ini, latensi instance DTS mungkin ditampilkan. No: menulis operasi SQL pada tabel denyut nadi. Dalam hal ini, fitur seperti pencadangan fisik dan kloning database sumber mungkin terpengaruh.
      Monitoring and Alerting	Menentukan apakah akan mengonfigurasi peringatan untuk instance sinkronisasi data. Jika tugas gagal atau latensi sinkronisasi melebihi ambang batas yang ditentukan, kontak peringatan akan menerima notifikasi. Nilai valid: No: tidak mengaktifkan peringatan. Yes: mengonfigurasi peringatan. Dalam hal ini, Anda juga harus mengonfigurasi ambang batas peringatan dan pengaturan notifikasi peringatan. Untuk informasi lebih lanjut, lihat bagian "Konfigurasikan pemantauan dan peringatan saat membuat tugas DTS" dari topik Konfigurasikan pemantauan dan peringatan.

   3. Klik Next: Configure Database and Table Fields. Di kotak dialog Note yang muncul, klik OK.

      Secara default, kolom kunci utama tabel sumber dipilih oleh DTS sebagai nilai parameter Primary Key Column ketika Anda menyinkronkan tabel sumber ke instance Tablestore. Untuk memodifikasi parameter Kolom Kunci Utama, atur parameter Definition Status menjadi All.

      Catatan

      Anda dapat memilih beberapa kolom untuk parameter Primary Key Column dari daftar drop-down untuk menghasilkan kunci utama komposit.

4. Klik Berikutnya: Simpan Pengaturan Tugas dan Pra-pemeriksaan di bagian bawah halaman.

   • Untuk melihat parameter yang diperlukan saat Anda memanggil operasi API terkait untuk mengonfigurasi tugas sinkronisasi data, arahkan pointer ke Next: Save Task Settings and Precheck dan klik Preview OpenAPI parameters.

   • Jika Anda tidak perlu melihat atau sudah melihat parameter tersebut, klik Next: Save Task Settings and Precheck di bagian bawah halaman.

   Catatan

   • Sebelum Anda dapat memulai tugas sinkronisasi data, DTS melakukan pra-pemeriksaan. Anda hanya dapat memulai tugas sinkronisasi data setelah tugas tersebut lulus pra-pemeriksaan.

   • Jika tugas sinkronisasi data gagal dalam pra-pemeriksaan, klik View Details di sebelah setiap item yang gagal. Setelah Anda menganalisis penyebab berdasarkan hasil pemeriksaan, atasi masalah tersebut. Kemudian, jalankan kembali pra-pemeriksaan.

   • Jika peringatan dihasilkan untuk suatu item selama pra-pemeriksaan, lakukan operasi berikut berdasarkan skenario:

     • Jika item peringatan tidak dapat diabaikan, klik View Details di sebelah item yang gagal dan atasi masalah tersebut. Kemudian, jalankan kembali pra-pemeriksaan.

     • Jika item peringatan dapat diabaikan, klik Confirm Alert Details. Di kotak dialog Lihat Detail, klik Ignore. Di pesan yang muncul, klik OK. Kemudian, klik Precheck Again untuk menjalankan kembali pra-pemeriksaan. Jika Anda mengabaikan item peringatan, ketidaksesuaian data mungkin terjadi, dan bisnis Anda mungkin terpapar risiko potensial.

5. Tunggu hingga success rate menjadi 100%. Kemudian, klik Next: Purchase Instance.

6. Beli instance.

   1. Di halaman Purchase Instance, konfigurasikan parameter Metode Penagihan dan Kelas Instance untuk instance sinkronisasi data. Tabel berikut menjelaskan parameter.

      Bagian	Parameter	Deskripsi
      New Instance Class	Metode Penagihan	Langganan: Anda membayar langganan saat membuat instance sinkronisasi data. Metode penagihan langganan lebih hemat biaya daripada metode penagihan bayar sesuai pemakaian untuk penggunaan jangka panjang. Bayar sesuai pemakaian: Anda dikenakan biaya untuk instance sinkronisasi data berdasarkan metode penagihan bayar sesuai pemakaian secara per jam. Metode penagihan bayar sesuai pemakaian cocok untuk penggunaan jangka pendek. Jika Anda tidak lagi memerlukan instance sinkronisasi data bayar sesuai pemakaian, Anda dapat melepaskan instance tersebut untuk mengurangi biaya.
      	Pengaturan Grup Sumber Daya	Grup sumber daya tempat instance sinkronisasi data termasuk. Nilai default: default resource group. Untuk informasi lebih lanjut, lihat Apa itu Resource Management?
      	Kelas Instance	DTS menyediakan kelas instance yang bervariasi dalam kecepatan sinkronisasi. Anda dapat memilih kelas instance berdasarkan kebutuhan bisnis Anda. Untuk informasi lebih lanjut, lihat Kelas instance dari instance sinkronisasi data.
      	Durasi Langganan	Jika Anda memilih metode penagihan berlangganan, tentukan durasi langganan dan jumlah instance sinkronisasi data yang ingin Anda buat. Durasi langganan dapat satu hingga sembilan bulan, satu tahun, dua tahun, tiga tahun, atau lima tahun. Catatan Parameter ini hanya tersedia jika Anda memilih metode penagihan berlangganan.

   2. Baca dan pilih Data Transmission Service (Pay-as-you-go) Service Terms.

   3. Klik Buy and Start. Di pesan yang muncul, klik OK.

7. Verifikasi hasil.

   1. Masuk ke Konsol Tablestore.

   2. Di bilah navigasi atas, pilih wilayah tempat instance Tablestore berada dan grup sumber daya tempat instance tersebut termasuk.

   3. Di halaman Overview, klik nama instance Tablestore atau klik Manage Instance di kolom Actions.

   4. Di tab Instance Details, klik tab Tables untuk menanyakan tabel yang telah Anda sinkronkan.