Topik ini menjelaskan cara memigrasikan data dari database Oracle yang dikelola sendiri ke instance AnalyticDB for PostgreSQL menggunakan Data Transmission Service (DTS). Setelah migrasi selesai, Anda dapat membangun gudang data real-time di instance tujuan.
Prasyarat
Database Oracle yang dikelola sendiri dan instance tujuan AnalyticDB for PostgreSQL telah dibuat.
CatatanUntuk informasi lebih lanjut tentang cara membuat instance tujuan AnalyticDB for PostgreSQL, lihat Buat Instance.
Untuk informasi lebih lanjut tentang versi yang didukung dari database sumber dan instance tujuan, lihat Gambaran Umum Skenario Migrasi Data.
Database Oracle yang dikelola sendiri berjalan dalam mode ARCHIVELOG. File log arsip dapat diakses dan periode retensi yang sesuai telah ditetapkan untuk file log arsip. Untuk informasi lebih lanjut, lihat Mengelola File Log Redo Arsip.
Fitur logging tambahan diaktifkan untuk database Oracle yang dikelola sendiri, dan parameter SUPPLEMENTAL_LOG_DATA_PK dan SUPPLEMENTAL_LOG_DATA_UI disetel ke Ya. Untuk informasi lebih lanjut, lihat Logging Tambahan.
Anda mengetahui kemampuan dan batasan DTS jika digunakan untuk memigrasikan data dari database Oracle. Advanced Database & Application Migration (ADAM) digunakan untuk evaluasi database, membantu Anda memigrasikan data ke cloud dengan lancar. Untuk informasi lebih lanjut, lihat Persiapkan Database Oracle dan Gambaran Umum.
Batasan
Selama migrasi skema, DTS memigrasikan kunci asing dari database sumber ke database tujuan.
Selama migrasi data penuh dan inkremental, DTS sementara menonaktifkan pengecekan kendala dan operasi kaskade pada kunci asing di tingkat sesi. Jika Anda melakukan operasi pembaruan dan penghapusan kaskade pada database sumber selama migrasi data, ketidaksesuaian data mungkin terjadi.
Kategori | Deskripsi |
Batasan pada database sumber |
|
Batasan lainnya |
|
Penagihan
Jenis Migrasi | Biaya Konfigurasi Instance | Biaya Lalu Lintas Internet |
Migrasi Skema dan Migrasi Data Penuh | Gratis. | Ketika parameter Access Method dari database tujuan diatur ke Public IP Address, Anda akan dikenakan biaya untuk lalu lintas internet. Untuk informasi lebih lanjut, lihat Gambaran Penagihan. |
Migrasi Data Inkremental | Dikenakan biaya. Untuk informasi lebih lanjut, lihat Gambaran Penagihan. |
Jenis Migrasi
Jenis Migrasi | Deskripsi |
Migrasi Skema | DTS memigrasikan skema objek yang akan dimigrasikan dari database sumber ke instance AnalyticDB for PostgreSQL tujuan. DTS mendukung migrasi skema untuk jenis objek berikut: tabel, indeks, kendala, fungsi, urutan, dan tampilan. Peringatan
|
Migrasi Data Penuh | DTS memigrasikan semua data yang ada dari objek dari database sumber ke instance AnalyticDB for PostgreSQL tujuan. |
Migrasi Data Inkremental | DTS memantau dan mengambil file log redo dari database Oracle yang dikelola sendiri. Kemudian, DTS memigrasikan data inkremental dari database Oracle yang dikelola sendiri ke instance AnalyticDB for PostgreSQL tujuan secara real-time. Migrasi data inkremental memungkinkan data dimigrasikan dengan lancar tanpa mengganggu layanan aplikasi yang dikelola sendiri selama migrasi data. |
Operasi SQL yang dapat dimigrasikan secara inkremental
Jenis Operasi | Pernyataan SQL |
DML | INSERT, UPDATE, dan DELETE |
DDL | ADD COLUMN |
Pemetaan Tipe Data
Untuk informasi lebih lanjut, lihat Pemetaan Tipe Data Antar Database Heterogen.
Sebelum Anda Memulai
Masuk ke database Oracle yang dikelola sendiri, buat akun yang ingin Anda gunakan untuk mengumpulkan data, dan berikan izin kepada akun tersebut.
Jika Anda telah membuat akun database dan akun tersebut memiliki izin yang dijelaskan dalam tabel berikut, Anda dapat melewati langkah ini.
Database | Migrasi Skema | Migrasi Data Penuh | Migrasi Data Inkremental |
Database Oracle yang dikelola sendiri | Izin pemilik skema | Izin pemilik skema | Izin granular |
Instance AnalyticDB for PostgreSQL | Izin tulis pada database tujuan | ||
Untuk membuat akun database dan memberikan izin kepada akun database, lakukan operasi berikut:
Database Oracle yang dikelola sendiri: Persiapkan Akun Database, CREATE USER, dan GRANT.
Akun awal instance AnalyticDB for PostgreSQL tujuan memiliki izin yang diperlukan. Untuk informasi lebih lanjut, lihat Buat dan Kelola Akun Database.
CatatanAnda juga dapat memasukkan akun yang memiliki izin RDS_SUPERUSER. Untuk informasi lebih lanjut, lihat Kelola Pengguna dan Izin.
Jika Anda ingin memigrasikan data inkremental dari database Oracle, Anda harus mengaktifkan logging arsip dan logging tambahan untuk mendapatkan data inkremental. Untuk informasi lebih lanjut, lihat bagian Konfigurasikan Database Oracle dari topik Persiapkan Database Oracle.
Prosedur
Klik Create Task. Di wizard Buat Tugas Migrasi Data, konfigurasikan database sumber dan tujuan. Tabel berikut menjelaskan parameter.
PeringatanSetelah mengonfigurasi database sumber dan tujuan, kami sarankan Anda membaca Limits yang ditampilkan di bagian atas halaman. Jika tidak, tugas mungkin gagal atau ketidaksesuaian data mungkin terjadi.
Bagian
Parameter
Deskripsi
N/A
Task Name
Nama tugas DTS. DTS secara otomatis menghasilkan nama tugas. Kami sarankan Anda menentukan nama informatif yang memudahkan identifikasi tugas. Anda tidak perlu menentukan nama tugas unik.
Source Database
Database Type
Tipe database sumber. Pilih Oracle.
Access Method
Metode akses database sumber. Dalam contoh ini, Public IP Address dipilih.
CatatanJika Anda memilih metode akses lainnya, Anda harus menyiapkan lingkungan yang diperlukan untuk database Oracle yang dikelola sendiri. Untuk informasi lebih lanjut, lihat Gambaran Persiapan.
Instance Region
Wilayah tempat database Oracle yang dikelola sendiri berada.
Hostname or IP address
Endpoint yang digunakan untuk terhubung ke database Oracle yang dikelola sendiri.
Port Number
Nomor port layanan database Oracle yang dikelola sendiri. Nilai default: 1521.
CatatanDalam contoh ini, port layanan database Oracle yang dikelola sendiri harus dapat diakses melalui Internet.
Oracle Type
Arsitektur database Oracle yang dikelola sendiri. Jika Anda memilih Non-RAC Instance, Anda harus mengonfigurasi parameter SID.
Jika Anda memilih RAC or PDB Instance, Anda harus mengonfigurasi parameter Service Name.
Dalam contoh ini, Non-RAC Instance dipilih.
Database Account
Akun database Oracle yang dikelola sendiri. Untuk informasi tentang izin yang diperlukan untuk akun tersebut, lihat bagian Sebelum Anda Memulai dari topik ini.
Database Password
Kata sandi yang digunakan untuk mengakses instance database.
Destination Database
Database Type
Tipe database tujuan. Pilih AnalyticDB for PostgreSQL.
Access Method
Metode akses database tujuan. Pilih Alibaba Cloud Instance.
Instance Region
Wilayah tempat instance AnalyticDB for PostgreSQL tujuan berada.
Instance ID
ID instance AnalyticDB for PostgreSQL tujuan.
Database Name
Nama database tujuan dalam instance AnalyticDB for PostgreSQL ke mana Anda ingin memigrasikan data.
Database Account
Akun database instance AnalyticDB for PostgreSQL tujuan. Untuk informasi tentang izin yang diperlukan untuk akun tersebut, lihat bagian Sebelum Anda Memulai dari topik ini.
Database Password
Kata sandi yang digunakan untuk mengakses instance database.
Jika daftar putih alamat IP dikonfigurasikan untuk database yang dikelola sendiri, tambahkan blok CIDR server DTS ke daftar putih alamat IP. Lalu, klik Test Connectivity.
PeringatanJika blok CIDR publik server DTS secara otomatis atau manual ditambahkan ke daftar putih instance database atau aturan grup keamanan instance ECS, risiko keamanan mungkin timbul. Oleh karena itu, sebelum menggunakan DTS untuk memigrasikan data, Anda harus memahami dan menyetujui potensi risiko serta mengambil langkah-langkah pencegahan, termasuk tetapi tidak terbatas pada langkah-langkah berikut: meningkatkan keamanan nama pengguna dan kata sandi, membatasi port yang diekspos, mengotentikasi panggilan API, memeriksa daftar putih atau aturan grup keamanan secara berkala dan melarang blok CIDR yang tidak sah, atau menghubungkan instance database ke DTS menggunakan Express Connect, VPN Gateway, atau Smart Access Gateway.
Konfigurasikan objek yang akan dimigrasikan dan pengaturan lanjutan. Tabel berikut menjelaskan parameter.
Parameter
Deskripsi
Migration Types
Untuk hanya melakukan migrasi data penuh, pilih Schema Migration dan Full Data Migration.
Untuk memastikan kontinuitas layanan selama migrasi data, pilih Schema Migration, Full Data Migration, dan Incremental Data Migration.
CatatanJika Anda tidak memilih Schema Migration, pastikan database dan tabel dibuat di database tujuan untuk menerima data dan fitur pemetaan nama objek diaktifkan di Selected Objects.
Jika Anda tidak memilih Incremental Data Migration, kami sarankan Anda tidak menulis data ke database sumber selama migrasi data. Ini memastikan konsistensi data antara database sumber dan tujuan.
Processing Mode of Conflicting Tables
Precheck and Report Errors: memeriksa apakah database tujuan berisi tabel yang menggunakan nama yang sama dengan tabel di database sumber. Jika database sumber dan tujuan tidak berisi tabel dengan nama tabel identik, pracheck dilewati. Jika tidak, kesalahan akan dikembalikan selama pracheck dan tugas migrasi data tidak dapat dimulai.
CatatanJika database sumber dan tujuan berisi tabel dengan nama identik dan tabel di database tujuan tidak dapat dihapus atau diganti namanya, Anda dapat menggunakan fitur pemetaan nama objek untuk mengganti nama tabel yang dimigrasikan ke database tujuan. Untuk informasi lebih lanjut, lihat Peta nama objek.
Ignore Errors and Proceed: melewati pracheck untuk nama tabel identik di database sumber dan tujuan.
PeringatanJika Anda memilih Ignore Errors and Proceed, ketidaksesuaian data mungkin terjadi dan bisnis Anda mungkin terpapar risiko potensial berikut:
Jika database sumber dan tujuan memiliki skema yang sama, dan catatan data memiliki kunci utama yang sama dengan catatan data yang ada di database tujuan, skenario berikut mungkin terjadi:
Selama migrasi data penuh, DTS tidak memigrasikan catatan data ke database tujuan. Catatan data yang ada di database tujuan dipertahankan.
Selama migrasi data inkremental, DTS memigrasikan catatan data ke database tujuan. Catatan data yang ada di database tujuan ditimpa.
Jika database sumber dan tujuan memiliki skema yang berbeda, hanya kolom tertentu yang dimigrasikan atau tugas migrasi data gagal. Lanjutkan dengan hati-hati.
Source Objects
Pilih satu atau lebih objek dari bagian Source Objects. Klik ikon
untuk menambahkan objek ke bagian Selected Objects. Selected Objects
Untuk mengganti nama objek yang ingin Anda migrasikan ke instance tujuan, klik kanan objek di bagian Selected Objects. Untuk informasi lebih lanjut, lihat Peta nama objek tunggal.
Untuk mengganti nama beberapa objek sekaligus, klik Batch Edit di pojok kanan atas bagian Selected Objects. Untuk informasi lebih lanjut, lihat Peta beberapa nama objek sekaligus.
CatatanJika Anda menggunakan fitur pemetaan nama objek untuk mengganti nama objek, objek lain yang bergantung pada objek tersebut mungkin gagal dimigrasikan.
Untuk menentukan kondisi WHERE untuk memfilter data, klik kanan tabel di bagian Selected Objects. Dalam kotak dialog yang muncul, tentukan kondisi tersebut. Untuk informasi lebih lanjut, lihat Tentukan kondisi filter.
Untuk memigrasikan operasi SQL yang dilakukan pada database atau tabel tertentu secara inkremental, klik kanan objek di bagian Selected Objects. Dalam kotak dialog yang muncul, pilih operasi SQL yang ingin Anda migrasikan secara inkremental. Untuk informasi lebih lanjut, lihat bagian Operasi SQL yang dapat dimigrasikan secara inkremental dari topik ini.
Klik Next: Advanced Settings untuk mengonfigurasi pengaturan lanjutan.
Data Verification Settings
Untuk informasi lebih lanjut tentang cara menggunakan fitur verifikasi data, lihat Konfigurasikan Tugas Verifikasi Data.
Advanced Settings
Parameter
Deskripsi
Dedicated Cluster for Task Scheduling
Secara default, DTS menjadwalkan tugas ke klaster bersama. Anda tidak perlu mengonfigurasi parameter ini. Anda dapat membeli klaster khusus dengan spesifikasi tertentu untuk menjalankan tugas migrasi data. Untuk informasi lebih lanjut, lihat Apa Itu Klaster Khusus DTS?
Retry Time for Failed Connections
Rentang waktu ulang untuk koneksi gagal. Jika database sumber atau tujuan gagal terhubung setelah tugas migrasi data dimulai, DTS segera mencoba kembali koneksi dalam rentang waktu ulang. Nilai valid: 10 hingga 1.440. Unit: menit. Nilai default: 720. Kami sarankan Anda menyetel parameter ini ke nilai lebih besar dari 30. Jika DTS tersambung kembali ke database sumber dan tujuan dalam rentang waktu ulang yang ditentukan, DTS melanjutkan tugas migrasi data. Jika tidak, tugas migrasi data gagal.
CatatanJika Anda menentukan rentang waktu ulang berbeda untuk beberapa tugas migrasi data yang berbagi database sumber atau tujuan yang sama, nilai yang ditentukan kemudian akan mengambil alih.
Ketika DTS mencoba kembali koneksi, Anda dikenakan biaya untuk instance DTS. Kami sarankan Anda menentukan rentang waktu ulang berdasarkan kebutuhan bisnis Anda. Anda juga dapat melepaskan instance DTS sesegera mungkin setelah instance database sumber dan tujuan dilepaskan.
Retry Time for Other Issues
Rentang waktu ulang untuk masalah lainnya. Misalnya, jika operasi DDL atau DML gagal dilakukan setelah tugas migrasi data dimulai, DTS segera mencoba lagi operasi tersebut dalam rentang waktu ulang. Nilai valid: 1 hingga 1.440. Unit: menit. Nilai default: 10. Kami sarankan Anda menyetel parameter ini ke nilai lebih besar dari 10. Jika operasi yang gagal berhasil dilakukan dalam rentang waktu ulang yang ditentukan, DTS melanjutkan tugas migrasi data. Jika tidak, tugas migrasi data gagal.
PentingNilai parameter Retry Time for Other Issues harus lebih kecil dari nilai parameter Retry Time for Failed Connections.
Enable Throttling for Full Data Migration
Menentukan apakah akan mengaktifkan pembatasan untuk migrasi data penuh. Selama migrasi data penuh, DTS menggunakan sumber daya baca dan tulis dari database sumber dan tujuan. Ini dapat meningkatkan beban server database. Anda dapat mengaktifkan pembatasan untuk migrasi data penuh berdasarkan kebutuhan bisnis Anda. Untuk mengonfigurasi pembatasan, Anda harus mengonfigurasi parameter Queries per second (QPS) to the source database, RPS of Full Data Migration, dan Data migration speed for full migration (MB/s). Ini mengurangi beban server database tujuan.
CatatanAnda hanya dapat mengonfigurasi parameter ini jika Anda memilih Full Data Migration untuk parameter Migration Types.
Enable Throttling for Incremental Data Migration
Menentukan apakah akan mengaktifkan pembatasan untuk migrasi data inkremental. Untuk mengonfigurasi pembatasan, Anda harus menyetel parameter RPS of Incremental Data Migration dan Data migration speed for incremental migration (MB/s). Ini membantu mengurangi beban server database tujuan.
CatatanAnda dapat mengonfigurasi parameter ini hanya jika memilih Incremental Data Migration untuk parameter Migration Types.
Environment Tag
Tag lingkungan yang digunakan untuk mengidentifikasi instance DTS. Anda dapat memilih tag berdasarkan kebutuhan bisnis Anda. Dalam contoh ini, tidak ada tag lingkungan yang dipilih.
Actual Write Code
Format pengkodean tempat data ditulis ke database tujuan. Anda dapat memilih format pengkodean sesuai dengan kebutuhan bisnis Anda.
Configure ETL
Menentukan apakah akan mengaktifkan fitur ekstraksi, transformasi, dan pemuatan (ETL). Untuk informasi lebih lanjut, lihat Apa Itu ETL? Nilai valid:
Yes: Mengonfigurasi fitur ETL. Anda dapat memasukkan pernyataan pemrosesan data di editor kode. Untuk informasi lebih lanjut, lihat Konfigurasikan ETL dalam Tugas Migrasi Data atau Sinkronisasi Data.
No: Tidak mengonfigurasi fitur ETL.
Monitoring and Alerting
Menentukan apakah akan mengonfigurasi peringatan untuk tugas migrasi data. Jika tugas gagal atau latensi migrasi melebihi ambang batas yang ditentukan, kontak peringatan menerima notifikasi. Nilai valid:
No: Tidak mengonfigurasi peringatan.
Yes: Mengonfigurasi peringatan. Dalam hal ini, Anda juga harus menyetel ambang batas peringatan dan pengaturan notifikasi peringatan. Untuk informasi lebih lanjut, lihat bagian Konfigurasikan Pemantauan dan Peringatan Saat Membuat Tugas DTS dari topik Konfigurasikan Pemantauan dan Peringatan.
Tentukan kolom kunci utama dan kolom kunci distribusi dari tabel yang ingin dimigrasikan ke instance AnalyticDB for PostgreSQL tujuan.
Di bagian bawah halaman, klik Next: Save Task Settings and Precheck.
Anda dapat memindahkan pointer ke Next: Save Task Settings and Precheck dan klik Preview OpenAPI parameters untuk melihat parameter yang harus ditentukan saat memanggil API terkait untuk mengonfigurasi tugas DTS.
CatatanSebelum memulai tugas migrasi data, DTS melakukan precheck. Anda hanya dapat memulai tugas migrasi data setelah tugas lulus precheck.
Jika tugas gagal lulus precheck, klik View Details di sebelah setiap item yang gagal. Setelah menganalisis penyebab berdasarkan hasil pemeriksaan, atasi masalah tersebut. Kemudian, jalankan precheck lagi.
Jika peringatan dipicu untuk suatu item selama precheck:
Jika item peringatan tidak dapat diabaikan, klik View Details di sebelah item yang gagal dan atasi masalah tersebut. Kemudian, jalankan precheck lagi.
Jika item peringatan dapat diabaikan, klik Confirm Alert Details. Di kotak dialog Lihat Detail, klik Ignore. Di pesan yang muncul, klik OK. Lalu, klik Precheck Again untuk menjalankan precheck lagi. Jika Anda mengabaikan item peringatan, ketidaksesuaian data mungkin terjadi, dan bisnis Anda mungkin terpapar risiko potensial.
Tunggu hingga Success Rate menjadi 100%. Lalu, klik Next: Purchase Instance.
Baca dan setujui Data Transmission Service (Pay-as-you-go) Service Terms dengan memilih kotak centang.
Klik Buy and Start. Di pesan yang muncul, klik OK.
Anda dapat melihat kemajuan tugas di halaman Data Migration.
CatatanJika tugas migrasi data tidak dapat digunakan untuk memigrasikan data inkremental, tugas tersebut secara otomatis berhenti. Completed ditampilkan di bagian Status .
Jika tugas migrasi data dapat digunakan untuk memigrasikan data inkremental, tugas tersebut tidak berhenti secara otomatis. Tugas migrasi data inkremental tidak pernah berhenti atau selesai. Running ditampilkan di bagian Status.