AnalyticDB：Migrasi data dari kluster Greenplum yang dikelola sendiri ke instance AnalyticDB for PostgreSQL

Proses migrasi

1. Evaluasi risiko migrasi dan pilih solusi yang sesuai.

2. Beli instance uji AnalyticDB for PostgreSQL dan periksa apakah solusi migrasi dapat digunakan untuk memigrasikan aplikasi dan data Anda.

3. Beli instance produksi AnalyticDB for PostgreSQL dan migrasikan pustaka produksi dari kluster Greenplum yang dikelola sendiri ke instance tersebut.

4. Sambungkan aplikasi Anda ke instance produksi AnalyticDB for PostgreSQL dan pastikan bahwa aplikasi dan data telah dimigrasikan.

Catatan penggunaan

• Data dapat dimigrasikan tetapi tidak disinkronkan. Jika data baru ditulis selama proses migrasi, Anda harus mengisi ulang data setelah migrasi selesai.

• Disarankan untuk memigrasikan data saat operasi penulisan dijeda. Jika tidak, kinerja layanan Anda mungkin terganggu dan proses migrasi melambat.

• Setelah migrasi data, instance AnalyticDB for PostgreSQL mengeksekusi pernyataan ANALYZE untuk mengumpulkan statistik guna menghasilkan rencana eksekusi optimal. Saat pernyataan ANALYZE dieksekusi, beban CPU pada node koordinator sementara meningkat sesuai dengan volume data.

• Disarankan untuk membuat instance AnalyticDB for PostgreSQL dengan jumlah node komputasi lebih besar atau sama dengan jumlah node dalam kluster Greenplum yang dikelola sendiri. Jika menggunakan gpcopy untuk migrasi data, jumlah node yang sama memberikan kecepatan migrasi optimal.

• Periksa perbedaan antara ekstensi yang didukung oleh kluster Greenplum yang dikelola sendiri dan instance AnalyticDB for PostgreSQL. Untuk informasi tentang ekstensi yang didukung oleh AnalyticDB for PostgreSQL, lihat Kelola Ekstensi.

• Sintaksis AnalyticDB for PostgreSQL sebagian tidak kompatibel dengan Greenplum 4X. Modifikasi diperlukan untuk menyesuaikan dengan sintaksis tersebut.

• Jika kluster Greenplum yang dikelola sendiri berisi tabel partisi atau tabel turunan, disarankan untuk memigrasikan data berdasarkan tabel anak.

Pilih metode migrasi

Gunakan gpcopy untuk memigrasikan data

1. Kirim Tiket untuk menghubungi dukungan teknis Alibaba Cloud dan menyediakan informasi berikut: ID instance AnalyticDB for PostgreSQL, alamat IP dan nomor port kluster Greenplum yang dikelola sendiri, akun kluster Greenplum dengan hak superuser untuk migrasi data, dan alamat IP server tempat kluster Greenplum berada.

2. Tambahkan 0.0.0.0/0 ke daftar putih alamat IP instance AnalyticDB for PostgreSQL untuk mengizinkan akses eksternal.

   Peringatan

   Pengaturan 0.0.0.0/0 memungkinkan semua alamat IP mengakses instance AnalyticDB for PostgreSQL, yang memiliki risiko keamanan tinggi. Setelah migrasi data, ubah daftar putih alamat IP secara tepat waktu.

3. Unduh gpcopy di server tempat kluster Greenplum yang dikelola sendiri berada. Hubungi dukungan teknis Alibaba Cloud untuk mengunduh dan menginstal gpcopy pada instance AnalyticDB for PostgreSQL.

   Catatan

   Dalam topik ini, gpcopy 2.3.2 digunakan. Disarankan untuk menggunakan gpcopy 2.3.x untuk migrasi data. Jika menggunakan gpcopy 2.4.x, enkripsi SSL harus diaktifkan. Untuk informasi lebih lanjut, lihat Konfigurasikan Enkripsi SSL.

4. Di direktori tempat paket gpcopy berada, jalankan kode berikut untuk menginstal gpcopy:

   #!/bin/bash
   
   tar xzvf gpcopy-2.3.2.tar.gz 
   
   cd gpcopy-2.3.2/
   cp gpcopy $GPHOME/bin
   cp gpcopy_helper $GPHOME/bin
   chmod 755 $GPHOME/bin/gpcopy
   chmod 755 $GPHOME/bin/gpcopy_helper
   
   host_sql=`psql -A -t -c "select address from gp_segment_configuration where role = 'p' and content >= 0 group by address"`
   host=(${host_sql})
   host_len=${#host[@]}
   
   host_str=""
   for ((i=0; i<$host_len; ++i)); do
       host_str=$host_str" -h "${host[$i]}
   done
   
   gpscp $host_str gpcopy_helper =:$GPHOME/bin
   gpssh $host_str -e "chmod 755 $GPHOME/bin/gpcopy_helper"

5. Jalankan perintah berikut untuk memigrasikan data:

   gpcopy --full --source-host <SOURCEHOST> --source-port <SOURCEPORT> --source-user <SOURCEUSER> --dest-host <DESTHOST> --dest-port <DESTPORT> --dest-user <DESTUSER> --jobs 4 --drop --validate count

   Tabel berikut menjelaskan parameter.

   Parameter	Deskripsi
   --full	Memigrasikan data lengkap dari kluster Greenplum yang dikelola sendiri. Jika Anda ingin memigrasikan hanya satu database dari kluster Greenplum yang dikelola sendiri, Anda dapat mengganti parameter ini dengan -d <nama database>.
   --jobs	Jumlah tabel yang dapat dimigrasikan secara bersamaan. Nilai default: 4. Anda dapat mengonfigurasi parameter ini berdasarkan kebutuhan bisnis Anda. Kami menyarankan Anda menghitung nilai parameter ini menggunakan rumus berikut: 2 × Jumlah koneksi + 1.
   <SOURCEHOST>	Alamat IP server tempat kluster Greenplum yang dikelola sendiri berada. Jika Anda menjalankan perintah migrasi di server tempat kluster Greenplum yang dikelola sendiri berada, Anda dapat mengganti parameter ini dengan localhost.
   <SOURCEPORT>	Nomor port kluster Greenplum yang dikelola sendiri. Nilai default: 5432. Anda dapat menjalankan perintah gpstate -s di server tempat kluster Greenplum yang dikelola sendiri berada untuk menanyakan nomor port aktual.
   <SOURCEUSER>	Akun kluster Greenplum yang dikelola sendiri yang memiliki hak superuser.
   <DESTHOST>	Alamat IP node koordinator instance AnalyticDB for PostgreSQL. Untuk informasi lebih lanjut, hubungi dukungan teknis Alibaba Cloud.
   <DESTPORT>	Nomor port node koordinator instance AnalyticDB for PostgreSQL. Untuk mendapatkan nomor port, hubungi dukungan teknis Alibaba Cloud.
   <DESTUSER>	Akun instance AnalyticDB for PostgreSQL yang memiliki hak superuser. Untuk mendapatkan akun, hubungi dukungan teknis Alibaba Cloud.

6. Setelah data dimigrasikan, ubah daftar putih alamat IP instance AnalyticDB for PostgreSQL dari 0.0.0.0/0 menjadi alamat IP yang diperlukan untuk bisnis Anda. Hubungi dukungan teknis Alibaba Cloud untuk memulihkan konfigurasi akun superuser, grup keamanan, dan logon tanpa kata sandi pg_hba.

Gunakan gptransfer untuk memigrasikan data

1. Buat akun istimewa untuk instance AnalyticDB for PostgreSQL. Untuk informasi lebih lanjut, lihat bagian "Buat Akun Istimewa" dari topik Buat Akun Basis Data.

2. Tambahkan 0.0.0.0/0 ke daftar putih alamat IP instance AnalyticDB for PostgreSQL untuk mengizinkan akses eksternal.

   Peringatan

   Pengaturan 0.0.0.0/0 memungkinkan semua alamat IP mengakses instance AnalyticDB for PostgreSQL, yang memiliki risiko keamanan tinggi. Setelah migrasi data, ubah daftar putih alamat IP secara tepat waktu.

3. Perbarui instance AnalyticDB for PostgreSQL ke versi minor terbaru. Untuk informasi tentang cara melihat dan memperbarui versi minor, lihat Lihat Versi Mesin Minor dan Perbarui Versi Mesin Minor.

4. Kirim Tiket untuk menghubungi dukungan teknis Alibaba Cloud dan menyediakan informasi berikut: ID instance AnalyticDB for PostgreSQL, alamat IP dan nomor port kluster Greenplum yang dikelola sendiri, akun kluster Greenplum dengan izin untuk migrasi data, dan alamat IP server tempat kluster Greenplum berada.

5. Tunggu hingga migrasi data selesai.

6. Ubah daftar putih alamat IP instance AnalyticDB for PostgreSQL dari 0.0.0.0/0 menjadi alamat IP yang diperlukan untuk bisnis Anda dan periksa apakah data Anda telah dimigrasikan ke instance tersebut. Setelah memastikan bahwa data telah dimigrasikan, sambungkan aplikasi Anda ke instance AnalyticDB for PostgreSQL.

Gunakan tabel asing OSS untuk memigrasikan data

Metode migrasi lainnya

Anda juga dapat menggunakan DataWorks Alibaba Cloud untuk memigrasikan data. Untuk informasi lebih lanjut, lihat Gunakan Integrasi Data untuk Memigrasikan dan Menyinkronkan Data Secara Batch.