Data Transmission Service：Menyinkronkan data dari database Oracle yang dikelola sendiri ke instance AnalyticDB for PostgreSQL

Prasyarat

• Versi mesin dari database Oracle yang dikelola-sendiri adalah 9i, 10g, 11g, 12c, 18c, atau 19c.

• Database Oracle yang dikelola-sendiri berjalan dalam mode ARCHIVELOG. File log arsip dapat diakses, dan periode retensi yang sesuai telah ditetapkan untuk file log arsip. Untuk informasi lebih lanjut, lihat Mengelola File Log Redo yang Diarsipkan.

• Fitur logging tambahan diaktifkan untuk database Oracle yang dikelola-sendiri, dan parameter SUPPLEMENTAL_LOG_DATA_PK dan SUPPLEMENTAL_LOG_DATA_UI disetel ke Ya. Untuk informasi lebih lanjut, lihat Logging Tambahan.

• Instance tujuan AnalyticDB for PostgreSQL telah dibuat. Untuk informasi lebih lanjut, lihat Buat Instance.

• Anda memahami kemampuan dan batasan DTS jika digunakan untuk menyinkronkan data dari database Oracle. Advanced Database & Application Migration (ADAM) digunakan untuk evaluasi database. Ini membantu Anda menyinkronkan data dengan lancar ke cloud. Untuk informasi lebih lanjut, lihat Persiapkan Database Oracle dan Ikhtisar.

Batasan

Penagihan

Topologi Sinkronisasi yang Didukung

• Sinkronisasi satu arah satu-ke-satu

• Sinkronisasi satu arah satu-ke-banyak

• Sinkronisasi satu arah banyak-ke-satu

• Sinkronisasi satu arah kaskade

Untuk informasi lebih lanjut tentang topologi sinkronisasi yang didukung oleh DTS, lihat Topologi Sinkronisasi.

Operasi SQL yang Dapat Disinkronkan

Izin yang Diperlukan untuk Akun Database

Prosedur

1. Pergi ke halaman Tugas Sinkronisasi Data.

   1. Masuk ke Konsol Manajemen Data (DMS).

   2. Di bilah navigasi atas, klik Data + AI.

   3. Di panel navigasi sisi kiri, pilih DTS (DTS) > Data Synchronization.

   Catatan

   • Operasi mungkin berbeda berdasarkan mode dan tata letak konsol DMS. Untuk informasi lebih lanjut, lihat Mode Sederhana dan Sesuaikan Tata Letak dan Gaya Konsol DMS.

   • Anda juga dapat pergi ke Halaman Tugas Sinkronisasi Data Konsol DTS Baru.

2. Di sebelah kanan Data Synchronization Tasks, pilih wilayah tempat instance sinkronisasi data berada.

   Catatan

   Jika Anda menggunakan konsol DTS baru, Anda harus memilih wilayah tempat instance sinkronisasi data berada di bilah navigasi atas.

3. Klik Create Task. Di wizard Buat Tugas Sinkronisasi Data, konfigurasikan database sumber dan tujuan. Tabel berikut menjelaskan parameter.

   Bagian	Parameter	Deskripsi
   Tidak Ada	Task Name	Nama tugas DTS. DTS secara otomatis menghasilkan nama tugas. Kami sarankan Anda menentukan nama deskriptif yang memudahkan untuk mengidentifikasi tugas. Anda tidak perlu menentukan nama tugas yang unik.
   Source Database	Database Type	Jenis database sumber. Pilih Oracle.
   	Connection Type	Metode akses database sumber. Dalam contoh ini, Self-managed Database on ECS dipilih. Catatan Jika database sumber Anda adalah database mandiri, Anda harus menyiapkan lingkungan jaringan untuk database tersebut. Untuk informasi lebih lanjut, lihat Ikhtisar Persiapan.
   	Instance Region	Wilayah tempat database Oracle mandiri berada.
   	ECS Instance ID	ID dari instance Elastic Compute Service (ECS) yang menyimpan database Oracle mandiri.
   	Port Number	Nomor port layanan database Oracle mandiri. Nilai default: 1521.
   	Oracle Type	Arsitektur database Oracle mandiri. Jika Anda memilih Non-RAC Instance, Anda harus mengonfigurasi parameter SID. Jika Anda memilih RAC or PDB Instance, Anda harus mengonfigurasi parameter Service Name. Dalam contoh ini, Non-RAC Instance dipilih.
   	Database Account	Akun database Oracle mandiri. Untuk informasi tentang izin yang diperlukan untuk akun tersebut, lihat bagian Izin yang Diperlukan untuk Akun Database dari topik ini.
   	Database Password	Kata sandi yang digunakan untuk mengakses database.
   Destination Database	Database Type	Jenis database tujuan. Pilih AnalyticDB for PostgreSQL.
   	Connection Type	Metode akses database tujuan. Pilih Alibaba Cloud Instance.
   	Instance Region	Wilayah tempat instance AnalyticDB for PostgreSQL berada.
   	Instance ID	ID instance tujuan AnalyticDB for PostgreSQL.
   	Database Name	Nama database di instance tujuan AnalyticDB for PostgreSQL ke mana Anda ingin menyinkronkan data.
   	Database Account	Akun database instance tujuan AnalyticDB for PostgreSQL. Untuk informasi tentang izin yang diperlukan untuk akun tersebut, lihat bagian Izin yang Diperlukan untuk Akun Database dari topik ini.
   	Database Password	Kata sandi yang digunakan untuk mengakses database.

4. Di bagian bawah halaman, klik Test Connectivity and Proceed.

   Jika database sumber atau tujuan adalah instance database Alibaba Cloud, seperti instance ApsaraDB RDS for MySQL atau instance ApsaraDB for MongoDB, DTS secara otomatis menambahkan blok CIDR server DTS ke daftar putih instance. Jika database sumber adalah database mandiri yang di-hosting pada instance Elastic Compute Service (ECS), DTS secara otomatis menambahkan blok CIDR server DTS ke aturan grup keamanan instance ECS, dan Anda harus memastikan bahwa instance ECS dapat mengakses database. Jika database diterapkan pada beberapa instance ECS, Anda harus secara manual menambahkan blok CIDR server DTS ke aturan grup keamanan setiap instance ECS. Jika database sumber atau tujuan adalah database mandiri yang diterapkan di pusat data atau disediakan oleh penyedia layanan cloud pihak ketiga, Anda harus secara manual menambahkan blok CIDR server DTS ke daftar putih database untuk mengizinkan DTS mengakses database. Untuk informasi lebih lanjut, lihat bagian "Blok CIDR Server DTS" dari topik Menambahkan Blok CIDR Server DTS.

   Peringatan

   Jika blok CIDR server DTS ditambahkan secara otomatis atau manual ke daftar putih database atau instance, atau ke aturan grup keamanan ECS, risiko keamanan mungkin timbul. Oleh karena itu, sebelum menggunakan DTS untuk menyinkronkan data, Anda harus memahami dan mengetahui potensi risiko serta mengambil langkah-langkah pencegahan, termasuk tetapi tidak terbatas pada langkah-langkah berikut: meningkatkan keamanan nama pengguna dan kata sandi, membatasi port yang diekspos, mengotentikasi panggilan API, memeriksa daftar putih atau aturan grup keamanan ECS secara berkala dan melarang blok CIDR yang tidak sah, atau menghubungkan database ke DTS dengan menggunakan Express Connect, Gateway VPN, atau Smart Access Gateway.

5. Konfigurasikan objek yang akan disinkronkan dan pengaturan lanjutan. Tabel berikut menjelaskan parameter.

   Parameter	Deskripsi
   Synchronization Types	Jenis sinkronisasi. Secara default, Incremental Data Synchronization dipilih. Anda juga harus memilih Schema Synchronization dan Full Data Synchronization. Setelah pra-pemeriksaan selesai, DTS menyinkronkan data historis objek yang dipilih dari database sumber ke klaster tujuan. Data historis ini menjadi dasar untuk sinkronisasi inkremental selanjutnya.
   Processing Mode for Existing Destination Tables	Precheck and Report Errors: memeriksa apakah database tujuan berisi tabel yang memiliki nama yang sama dengan tabel di database sumber. Jika database sumber dan tujuan tidak berisi tabel dengan nama identik, pra-pemeriksaan berhasil. Jika tidak, kesalahan akan dikembalikan selama pra-pemeriksaan, dan tugas sinkronisasi data tidak dapat dimulai. Catatan Jika database sumber dan tujuan berisi tabel dengan nama identik dan tabel di database tujuan tidak dapat dihapus atau diganti namanya, Anda dapat menggunakan fitur pemetaan nama objek untuk mengganti nama tabel yang disinkronkan ke database tujuan. Untuk informasi lebih lanjut, lihat Peta Nama Objek. Ignore Errors and Proceed: melewati pra-pemeriksaan untuk nama tabel identik di database sumber dan tujuan. Peringatan Jika Anda memilih Ignore Errors and Proceed, ketidaksesuaian data mungkin terjadi dan bisnis Anda mungkin terpapar risiko potensial. Jika database sumber dan tujuan memiliki skema yang sama dan catatan data di database tujuan memiliki nilai kunci utama atau nilai kunci unik yang sama dengan catatan data di database sumber: Selama sinkronisasi data penuh, DTS tidak menyinkronkan catatan data ke database tujuan. Catatan data yang ada di database tujuan dipertahankan. Selama sinkronisasi data inkremental, DTS menyinkronkan catatan data ke database tujuan. Catatan data yang ada di database tujuan ditimpa. Jika database sumber dan tujuan memiliki skema yang berbeda, data mungkin gagal diinisialisasi. Dalam hal ini, hanya beberapa kolom yang disinkronkan, atau instance sinkronisasi data gagal. Lanjutkan dengan hati-hati.
   Table Merging	Yes: Dalam skenario pemrosesan transaksi online (OLTP), sharding diimplementasikan untuk mempercepat respons terhadap tabel bisnis. Dalam skenario pemrosesan analitik online (OLAP), Anda dapat menyimpan volume data yang besar dalam satu tabel. Ini membuat kueri SQL Anda lebih efisien. Anda dapat menggabungkan beberapa tabel sumber yang memiliki skema yang sama ke dalam satu tabel tujuan. Fitur ini memungkinkan Anda menyinkronkan data dari beberapa tabel di database sumber ke satu tabel di database tujuan. Untuk informasi lebih lanjut, lihat Aktifkan fitur penggabungan multi-tabel. Catatan Setelah Anda memilih beberapa tabel dari database sumber, Anda harus mengubah nama tabel-tabel ini menjadi nama tabel tujuan dengan menggunakan fitur pemetaan nama objek. Untuk informasi lebih lanjut, lihat Peta Nama Objek. DTS menambahkan kolom bernama __dts_data_source ke tabel tujuan. Kolom ini digunakan untuk mencatat sumber data. Tipe data kolom ini adalah TEXT. Nilai-nilai kolom ini dalam format berikut: ID instance sinkronisasi data:nama database sumber:nama skema sumber:nama tabel sumber. Ini memungkinkan DTS mengidentifikasi setiap tabel sumber. Contoh: dts********:dtstestdata:testschema:customer1. Jika Anda menyetel parameter ini ke Ya, semua tabel sumber yang dipilih dalam tugas digabungkan ke dalam tabel tujuan. Jika Anda tidak perlu menggabungkan tabel sumber tertentu, Anda dapat membuat tugas sinkronisasi data terpisah untuk tabel-tabel tersebut. Peringatan Kami sarankan Anda tidak melakukan operasi DDL untuk mengubah skema database atau tabel sumber. Jika tidak, ketidaksesuaian data terjadi atau tugas sinkronisasi data gagal. No: Nilai ini dipilih secara default.
   Select DDL and DML for Instance-Level Synchronization	Operasi DDL dan DML yang akan disinkronkan. Untuk informasi lebih lanjut, lihat bagian Operasi SQL yang Dapat Disinkronkan dari topik ini. Catatan Untuk memilih operasi SQL yang dilakukan pada database atau tabel tertentu, lakukan langkah-langkah berikut: Di bagian Selected Objects, klik kanan objek. Dalam kotak dialog yang muncul, pilih operasi SQL yang ingin Anda sinkronkan.
   Source Objects	Pilih satu atau lebih objek dari bagian Source Objects dan klik ikon untuk menambahkan objek ke bagian Selected Objects. Catatan Anda dapat memilih tabel sebagai objek yang akan disinkronkan.
   Selected Objects	Untuk mengganti nama objek yang ingin Anda sinkronkan ke instance tujuan, klik kanan objek di bagian Selected Objects. Untuk informasi lebih lanjut, lihat bagian "Peta Nama Objek Tunggal" dari topik Pemetaan Nama Objek. Untuk mengganti nama beberapa objek sekaligus, klik Batch Edit di pojok kanan atas bagian Selected Objects. Untuk informasi lebih lanjut, lihat bagian "Peta Beberapa Nama Objek Sekaligus" dari topik Pemetaan Nama Objek. Catatan Untuk memilih operasi SQL yang dilakukan pada database atau tabel tertentu, klik kanan objek di bagian Batch Edit. Dalam kotak dialog yang muncul, pilih operasi SQL yang ingin Anda sinkronkan. Untuk informasi lebih lanjut, lihat bagian Operasi SQL yang Dapat Disinkronkan dari topik ini. Untuk menentukan kondisi filter untuk menyinkronkan data yang memenuhi kondisi tertentu, klik kanan tabel di bagian Selected Objects. Dalam kotak dialog yang muncul, tentukan kondisi filter. Untuk informasi lebih lanjut, lihat Atur Kondisi Filter. Jika Anda menggunakan fitur pemetaan nama objek untuk mengganti nama objek, objek lain yang bergantung pada objek tersebut mungkin gagal disinkronkan.

6. Klik Next: Advanced Settings untuk mengonfigurasi pengaturan lanjutan.

   • Data Verification Settings

     Untuk informasi lebih lanjut tentang cara menggunakan fitur verifikasi data, lihat Konfigurasikan Verifikasi Data.

   • Advanced Settings

     Parameter	Deskripsi
     Dedicated Cluster for Task Scheduling	Secara default, DTS menjadwalkan tugas ke klaster bersama jika Anda tidak menentukan klaster khusus. Jika Anda ingin meningkatkan stabilitas instance sinkronisasi data, belilah klaster khusus. Untuk informasi lebih lanjut, lihat Apa itu Klaster Khusus DTS.
     Enclose Object Names in Quotation Marks	Menentukan apakah nama objek dikutip dengan tanda kutip. Jika Anda memilih Yes dan salah satu dari kondisi berikut terpenuhi, DTS mengutip nama objek dengan tanda kutip tunggal (') atau tanda kutip ganda (") selama sinkronisasi skema dan sinkronisasi data inkremental: Lingkungan bisnis database sumber peka huruf besar-kecil tetapi nama database berisi huruf besar dan kecil. Nama tabel sumber tidak dimulai dengan huruf dan berisi karakter selain huruf, angka, dan karakter khusus. Catatan Nama tabel sumber hanya dapat berisi karakter khusus berikut: garis bawah (_), tanda pagar (#), dan tanda dolar ($). Nama skema, tabel, atau kolom yang ingin Anda sinkronkan merupakan kata kunci dari database tujuan, kata kunci tercadang, atau karakter tidak valid. Catatan Jika Anda memilih Ya, setelah tugas sinkronisasi data selesai, Anda harus menentukan nama objek dalam tanda kutip untuk menanyakan objek tersebut.
     Retry Time for Failed Connections	Rentang waktu percobaan ulang untuk koneksi yang gagal. Jika basis data sumber atau tujuan gagal terhubung setelah tugas sinkronisasi data dimulai, DTS segera mencoba melakukan koneksi ulang dalam rentang waktu tersebut. Nilai valid: 10 hingga 1.440. Satuan: menit. Nilai default: 720. Kami menyarankan Anda menetapkan parameter ini ke nilai lebih dari 30. Jika DTS berhasil menyambung kembali ke basis data sumber dan tujuan dalam rentang waktu yang ditentukan, DTS akan melanjutkan tugas sinkronisasi data. Jika tidak, tugas sinkronisasi data gagal. Catatan Jika Anda menentukan rentang waktu percobaan ulang yang berbeda untuk beberapa tugas sinkronisasi data dengan basis data sumber atau tujuan yang sama, maka rentang waktu percobaan ulang terpendek yang akan berlaku. Saat Data Transmission Service (DTS) mencoba koneksi ulang, instance DTS akan dikenakan biaya. Kami menyarankan Anda menentukan rentang waktu percobaan ulang sesuai kebutuhan bisnis Anda. Selain itu, Anda dapat melepaskan instance DTS segera setelah instance sumber dan tujuan dilepaskan.
     Retry Time for Other Issues	Rentang waktu coba ulang untuk masalah lain. Misalnya, jika operasi DDL atau DML gagal dilakukan setelah tugas sinkronisasi data dimulai, DTS segera mencoba ulang operasi dalam rentang waktu tersebut. Nilai valid: 1 hingga 1440. Unit: menit. Nilai default: 10. Kami sarankan Anda menetapkan parameter ini ke nilai lebih dari 10. Jika operasi yang gagal berhasil dilakukan dalam rentang waktu yang ditentukan, DTS melanjutkan tugas sinkronisasi data. Jika tidak, tugas sinkronisasi data gagal. Penting Nilai parameter Retry Time for Other Issues harus lebih kecil dari nilai parameter Retry Time for Failed Connections.
     Enable Throttling for Full Data Synchronization	Selama sinkronisasi data penuh, DTS menggunakan sumber daya baca dan tulis dari database sumber dan tujuan. Hal ini dapat meningkatkan beban pada server database. Anda dapat mengonfigurasi parameter Queries per second (QPS) to the source database, RPS of Full Data Migration, dan Data migration speed for full migration (MB/s) untuk tugas sinkronisasi data penuh guna mengurangi beban pada server database tujuan. Catatan Anda hanya dapat mengonfigurasi parameter ini jika Full Data Synchronization dipilih untuk parameter Synchronization Types.
     Enable Throttling for Incremental Data Synchronization	Menentukan apakah akan mengaktifkan pembatasan untuk sinkronisasi data inkremental. Anda dapat mengaktifkan pembatasan untuk sinkronisasi data inkremental berdasarkan kebutuhan bisnis Anda. Untuk mengonfigurasi pembatasan, Anda harus mengonfigurasi parameter RPS of Incremental Data Synchronization dan Data synchronization speed for incremental synchronization (MB/s). Ini mengurangi beban pada server database tujuan.
     Environment Tag	Tag lingkungan yang digunakan untuk mengidentifikasi instance DTS. Anda dapat memilih tag lingkungan berdasarkan kebutuhan bisnis Anda. Dalam contoh ini, tidak ada tag lingkungan yang dipilih.
     Actual Write Code	Format penyandian tempat data ditulis ke database tujuan. Anda dapat memilih format penyandian berdasarkan kebutuhan bisnis Anda.
     Configure ETL	Menentukan apakah akan mengaktifkan fitur ekstraksi, transformasi, dan pemuatan (ETL). Untuk informasi lebih lanjut, lihat Apa itu ETL? Nilai valid: Yes: mengonfigurasi fitur ETL. Anda dapat memasukkan pernyataan pemrosesan data di editor kode. Untuk informasi lebih lanjut, lihat Konfigurasikan ETL dalam tugas migrasi data atau sinkronisasi data. No: tidak mengonfigurasi fitur ETL.
     Monitoring and Alerting	Menentukan apakah akan mengonfigurasi peringatan untuk instance sinkronisasi data. Jika tugas gagal atau latensi sinkronisasi melebihi ambang batas yang ditentukan, kontak peringatan akan menerima notifikasi. Nilai valid: No: tidak mengaktifkan peringatan. Yes: mengonfigurasi peringatan. Dalam hal ini, Anda juga harus mengonfigurasi ambang batas peringatan dan pengaturan notifikasi peringatan. Untuk informasi lebih lanjut, lihat bagian "Konfigurasikan pemantauan dan peringatan saat Anda membuat tugas DTS" dari topik Konfigurasikan Pemantauan dan Peringatan.

7. Di bagian bawah halaman, klik Next: Configure Database and Table Fields. Di halaman yang muncul, atur kolom kunci utama dan kolom distribusi dari tabel yang ingin Anda sinkronkan ke instance tujuan AnalyticDB for PostgreSQL.

8. Simpan pengaturan tugas dan jalankan pra-pemeriksaan.

   • Untuk melihat parameter yang harus ditentukan saat Anda memanggil operasi API terkait untuk mengonfigurasi tugas DTS, arahkan pointer ke Next: Save Task Settings and Precheck dan klik Preview OpenAPI parameters.

   • Jika Anda tidak perlu melihat atau telah melihat parameter, klik Next: Save Task Settings and Precheck di bagian bawah halaman.

   Catatan

   • Sebelum Anda dapat memulai tugas sinkronisasi data, DTS melakukan pra-pemeriksaan. Anda hanya dapat memulai tugas sinkronisasi data setelah tugas tersebut lolos pra-pemeriksaan.

   • Jika tugas sinkronisasi data gagal pra-pemeriksaan, klik View Details di sebelah setiap item yang gagal. Setelah Anda menganalisis penyebab berdasarkan hasil pemeriksaan, atasi masalah tersebut. Kemudian, jalankan pra-pemeriksaan lagi.

   • Jika peringatan dipicu untuk suatu item selama pra-pemeriksaan:

     • Jika item peringatan tidak dapat diabaikan, klik View Details di sebelah item yang gagal dan atasi masalah tersebut. Kemudian, jalankan pra-pemeriksaan lagi.

     • Jika item peringatan dapat diabaikan, klik Confirm Alert Details. Di kotak dialog Lihat Detail, klik Ignore. Di pesan yang muncul, klik OK. Kemudian, klik Precheck Again untuk menjalankan pra-pemeriksaan lagi. Jika Anda mengabaikan item peringatan, ketidaksesuaian data mungkin terjadi, dan bisnis Anda mungkin terpapar risiko potensial.

9. Tunggu hingga Success Rate menjadi 100%. Kemudian, klik Next: Purchase Instance.

10. Di halaman buy, konfigurasikan parameter Metode Penagihan dan Kelas Instance untuk tugas sinkronisasi data. Tabel berikut menjelaskan parameter.

    Bagian	Parameter	Deskripsi
    New Instance Class	Metode Penagihan	Langganan: Anda membayar langganan saat membuat instance sinkronisasi data. Metode penagihan langganan lebih hemat biaya daripada metode penagihan bayar sesuai pemakaian untuk penggunaan jangka panjang. Bayar sesuai pemakaian: Instance bayar sesuai pemakaian ditagih per jam. Metode penagihan bayar sesuai pemakaian cocok untuk penggunaan jangka pendek. Jika Anda tidak lagi memerlukan instance sinkronisasi data bayar sesuai pemakaian, Anda dapat melepaskan instance untuk mengurangi biaya.
    	Pengaturan Grup Sumber Daya	Grup sumber daya tempat instance sinkronisasi data berada. Nilai default: default resource group. Untuk informasi lebih lanjut, lihat Apa itu Manajemen Sumber Daya?
    	Kelas Instance	DTS menyediakan kelas instance yang bervariasi dalam kecepatan sinkronisasi. Anda dapat memilih kelas instance berdasarkan kebutuhan bisnis Anda. Untuk informasi lebih lanjut, lihat Kelas Instance dari Instance Sinkronisasi Data.
    	Durasi Langganan	Jika Anda memilih metode penagihan langganan, tentukan durasi langganan dan jumlah instance sinkronisasi data yang ingin Anda buat. Durasi langganan bisa satu hingga sembilan bulan, satu tahun, dua tahun, tiga tahun, atau lima tahun. Catatan Parameter ini hanya tersedia jika Anda memilih metode penagihan Subscription.

11. Baca dan pilih Data Transmission Service (Pay-as-you-go) Service Terms.

12. Klik Buy and Start. Di kotak dialog yang muncul, klik Data Transmission Service (Pay-as-you-go) Service Terms.

    Anda dapat melihat kemajuan tugas di daftar tugas.