Data Online Migration：Migrasi data

Catatan Penggunaan

• Data Online Migration mengakses alamat data sumber menggunakan antarmuka publik yang disediakan oleh penyedia layanan penyimpanan. Perilaku akses bergantung pada implementasi antarmuka dari penyedia layanan tersebut.

• Saat menggunakan Data Online Migration untuk migrasi, tugas tersebut akan mengonsumsi sumber daya di alamat data sumber dan tujuan, yang dapat memengaruhi operasional bisnis Anda. Untuk memastikan kelangsungan bisnis, kami menyarankan Anda mengaktifkan pembatasan kecepatan atau menjalankan tugas migrasi selama jam-jam sepi setelah penilaian yang cermat.

• Sebelum memulai tugas migrasi, Data Online Migration memeriksa file di alamat data sumber dan tujuan. Jika sebuah file di kedua alamat memiliki nama yang sama dan parameter Metode Timpa File diatur ke Ya, file di alamat data tujuan akan ditimpa selama migrasi. Jika kedua file berisi informasi berbeda dan file di alamat data tujuan perlu dipertahankan, ubah nama salah satu file atau cadangkan file tersebut.

• Atribut LastModifyTime dari file sumber dipertahankan setelah migrasi ke bucket tujuan. Jika aturan siklus hidup dikonfigurasikan untuk bucket tujuan dan mulai berlaku, file dengan waktu modifikasi terakhir dalam periode tertentu mungkin dihapus atau diarsipkan dalam jenis penyimpanan tertentu.

Batasan

• Data Online Migration hanya memungkinkan migrasi data dari satu bucket dalam satu tugas. Anda tidak dapat memigrasikan semua data dalam akun Anda dalam satu tugas.

• Hanya atribut data tertentu yang dapat dimigrasikan dari bucket Amazon S3 ke bucket Alibaba Cloud OSS:

  • Atribut yang dapat dimigrasikan meliputi x-amz-meta-*, LastModifyTime, Content-Type, Cache-Control, Content-Encoding, Content-Disposition, Content-Language, dan Expires.

  • Atribut yang tidak dapat dimigrasikan mencakup tetapi tidak terbatas pada StorageClass, Acl, enkripsi sisi server, dan Tagging.

    Catatan

    Periksa hasil migrasi aktual untuk mengetahui atribut lain yang tidak dapat dimigrasikan.

• Jika Anda menggunakan sumber data yang tidak kompatibel dengan Amazon S3, seperti Volcano Engine dan NetEase, migrasi mungkin gagal atau menyebabkan masalah tak terduga. Dalam hal ini, kami menyarankan Anda memigrasikan data melalui HTTP.

Langkah 1: Pilih wilayah

1. Masuk ke Konsol Migrasi Data Online sebagai Pengguna Resource Access Management (RAM) yang dibuat untuk migrasi data.

2. Di pojok kiri atas bilah navigasi, pilih wilayah tempat alamat data sumber berada atau wilayah terdekat jika wilayah asal tidak didukung.

   Wilayah yang didukung di Tiongkok meliputi Tiongkok (Beijing), Tiongkok (Shanghai), Tiongkok (Hangzhou), Tiongkok (Shenzhen), Tiongkok (Ulanqab), dan Tiongkok (Hong Kong). Wilayah yang didukung di luar Tiongkok meliputi Singapura, Jerman (Frankfurt), dan AS (Virginia).

   Penting

   • Alamat data dan tugas migrasi yang dibuat di suatu wilayah tidak dapat digunakan di wilayah lain. Pilih wilayah dengan hati-hati.

   • Pilih wilayah tempat alamat data sumber berada. Jika wilayah tersebut tidak didukung, pilih wilayah terdekat.

   • Untuk mempercepat migrasi lintas batas, aktifkan akselerasi transfer. Namun, biaya tambahan akan dikenakan untuk fitur ini. Untuk informasi lebih lanjut, lihat Akselerasi Transfer.

Langkah 2: Buat alamat data sumber

1. Di panel navigasi sisi kiri, pilih Data Online Migration > Address Management. Di halaman Manajemen Alamat, klik Create Address.

2. Di panel Create Address, konfigurasikan parameter dan klik OK. Tabel berikut menjelaskan parameter tersebut.

   Parameter	Diperlukan	Deskripsi
   Name	Ya	Nama alamat data sumber. Nama tersebut harus memenuhi persyaratan berikut: Nama tersebut memiliki panjang 3 hingga 63 karakter. Nama tersebut harus peka huruf besar/kecil dan dapat berisi huruf kecil, angka, tanda hubung (-), dan garis bawah (_). Nama tersebut dikodekan dalam format UTF-8 dan tidak dapat dimulai dengan tanda hubung (-) atau garis bawah (_).
   Type	Ya	Tipe alamat data sumber. Pilih AWS S3.
   Domain Name	Ya	Titik akhir alamat data sumber. Untuk informasi lebih lanjut, lihat bagian "Titik akhir Amazon S3" dari topik Titik akhir dan kuota Amazon Simple Storage Service.
   AccessKeyId	Ya	Pasangan kunci akses dari pengguna Identity and Access Management (IAM) yang digunakan untuk membaca data dari alamat data sumber. Amazon S3 menggunakan pasangan kunci akses untuk memeriksa apakah pengguna IAM memiliki izin untuk membaca data dari alamat data sumber.
   SecretAccessKey	Ya
   Bucket	Ya	Nama bucket Amazon S3 tempat data yang akan dimigrasikan disimpan. Catatan Nama bucket tidak boleh berisi karakter tidak valid, seperti spasi, baris baru, atau karakter tab.
   Prefix	Tidak	Awalan alamat data sumber. Anda dapat menentukan awalan untuk memigrasikan data tertentu. Jika Anda menentukan awalan, hanya data di direktori yang ditentukan oleh awalan yang akan dimigrasikan. Awalan tidak dapat dimulai dengan garis miring (/) tetapi harus diakhiri dengan garis miring (/). Jika Anda tidak menentukan awalan, semua data di bucket Amazon S3 akan dimigrasikan.
   Tunnel	Tidak	Nama saluran data yang ingin Anda gunakan. Penting Parameter ini hanya diperlukan saat Anda memigrasikan data ke cloud menggunakan sirkuit Express Connect atau gateway VPN atau memigrasikan data dari database yang dikelola sendiri ke cloud. Jika data di alamat data tujuan disimpan dalam sistem file lokal atau Anda perlu memigrasikan data melalui sirkuit Express Connect di lingkungan seperti Alibaba Finance Cloud atau Apsara Stack, Anda harus membuat dan menerapkan agen.
   Agent	Tidak	Nama agen yang ingin Anda gunakan. Penting Parameter ini hanya diperlukan saat Anda memigrasikan data ke cloud menggunakan sirkuit Express Connect atau gateway VPN atau memigrasikan data dari database yang dikelola sendiri ke cloud. Anda dapat memilih hingga 200 agen sekaligus untuk saluran data tertentu.

Langkah 3: Buat alamat data tujuan

1. Di panel navigasi sisi kiri, pilih Data Online Migration > Address Management. Di halaman Manajemen Alamat, klik Create Address.

2. Di panel Create Address, konfigurasikan parameter dan klik OK. Tabel berikut menjelaskan parameter tersebut.

Parameter	Diperlukan	Deskripsi
Name	Ya	Nama alamat data tujuan. Nama tersebut harus memenuhi persyaratan berikut: Nama tersebut memiliki panjang 3 hingga 63 karakter. Nama tersebut harus peka huruf besar/kecil dan dapat berisi huruf kecil, angka, tanda hubung (-), dan garis bawah (_). Nama tersebut dikodekan dalam format UTF-8 dan tidak dapat dimulai dengan tanda hubung (-) atau garis bawah (_).
Type	Ya	Tipe alamat data tujuan. Pilih Alibaba OSS.
Nama Domain Kustom	Tidak	Menentukan apakah nama domain kustom didukung.
Region	Ya	Wilayah tempat alamat data tujuan berada. Contoh: China (Hangzhou).
Otorisasi Peran	Ya	Bucket tujuan milik Akun Alibaba Cloud yang digunakan untuk masuk ke Konsol Migrasi Data Online Kami menyarankan Anda untuk membuat dan memberi otorisasi kepada peran RAM di Konsol Migrasi Data Online. Untuk informasi lebih lanjut, lihat Memberi otorisasi peran RAM di Konsol Migrasi Data Online. Anda juga dapat secara manual melampirkan kebijakan ke peran RAM di Konsol RAM. Untuk informasi lebih lanjut, lihat bagian "Langkah 4: Memberikan izin pada bucket tujuan ke peran RAM" dari topik Persiapan. Bucket tujuan tidak milik Akun Alibaba Cloud yang digunakan untuk masuk ke Konsol Migrasi Data Online Anda dapat melampirkan kebijakan ke peran RAM di Konsol OSS. Untuk informasi lebih lanjut, lihat bagian "Langkah 4: Memberikan izin pada bucket tujuan ke peran RAM" dari topik Persiapan.
Bucket	Ya	Nama bucket OSS ke mana data dimigrasikan.
Prefix	Tidak	Awalan alamat data tujuan. Anda dapat menentukan awalan untuk memigrasikan data tertentu. Awalan tersebut tidak dapat dimulai dengan garis miring (/) tetapi harus diakhiri dengan garis miring (/). Contoh: data/to/oss/. Tentukan awalan untuk alamat data tujuan: Misalnya, Anda menetapkan awalan alamat data sumber menjadi example/src/, menyimpan file bernama example.jpg di example/src/, dan menetapkan awalan alamat data tujuan menjadi example/dest/. Setelah file example.jpg bermigrasi ke alamat data tujuan, jalur lengkap file tersebut adalah example/dest/example.jpg. Jangan tentukan awalan untuk alamat data tujuan: Jika Anda tidak menentukan awalan untuk alamat data tujuan, data sumber akan dimigrasikan ke direktori root bucket tujuan.
Tunnel	Tidak	Nama saluran data yang ingin Anda gunakan. Penting Parameter ini hanya diperlukan saat Anda memigrasikan data ke cloud menggunakan sirkuit Express Connect atau gateway VPN atau memigrasikan data dari database yang dikelola sendiri ke cloud. Jika data di alamat data tujuan disimpan dalam sistem file lokal atau Anda perlu memigrasikan data melalui sirkuit Express Connect di lingkungan seperti Alibaba Finance Cloud atau Apsara Stack, Anda harus membuat dan menerapkan agen.
Agent	Tidak	Nama proxy yang Anda gunakan. Penting Parameter ini hanya diperlukan saat Anda memigrasikan data ke cloud menggunakan jalur sewa atau gateway VPN atau memigrasikan data dari database yang dikelola sendiri ke cloud. Anda dapat memilih hingga 200 agen sekaligus untuk saluran data tertentu.

Langkah 4: Buat tugas migrasi

1. Di panel navigasi sisi kiri, pilih Data Online Migration > Migration Tasks. Di halaman Tugas Migrasi, klik Create Task.

2. Di langkah Select Address, konfigurasikan parameter. Tabel berikut menjelaskan parameter tersebut.

   Parameter	Diperlukan	Deskripsi
   Name	Ya	Nama tugas migrasi. Nama tersebut harus memenuhi persyaratan berikut: Nama tersebut memiliki panjang 3 hingga 63 karakter. Nama tersebut harus peka huruf besar/kecil dan dapat berisi huruf kecil, angka, tanda hubung (-), dan garis bawah (_). Nama tersebut dikodekan dalam format UTF-8 dan tidak dapat dimulai dengan tanda hubung (-) atau garis bawah (_).
   Source Address	Ya	Alamat data sumber yang Anda buat.
   Destination Address	Ya	Alamat data tujuan yang Anda buat.

3. Di langkah Task Configurations, konfigurasikan parameter. Tabel berikut menjelaskan parameter tersebut.

   Parameter	Diperlukan	Deskripsi
   Migration Bandwidth	Tidak	Bandwidth maksimum yang tersedia untuk tugas migrasi. Nilai valid: Default: Gunakan batas atas default untuk bandwidth migrasi. Kecepatan migrasi aktual tergantung pada ukuran file dan jumlah file. Specify an upper limit: Tentukan batas atas khusus untuk bandwidth migrasi sesuai petunjuk. Penting Kecepatan migrasi aktual tergantung pada beberapa faktor, seperti alamat data sumber, jaringan, pembatasan kecepatan di alamat data tujuan, dan ukuran file. Oleh karena itu, kecepatan migrasi aktual mungkin tidak mencapai batas atas yang ditentukan. Tentukan nilai yang wajar untuk batas atas bandwidth migrasi berdasarkan evaluasi alamat data sumber, tujuan migrasi, situasi bisnis, dan bandwidth jaringan. Pembatasan yang tidak tepat dapat memengaruhi kinerja bisnis.
   Files Migrated Per Second	Tidak	Jumlah maksimum file yang dapat dimigrasikan per detik. Nilai valid: Default: Gunakan batas atas default untuk jumlah file yang dapat dimigrasikan per detik. Specify an upper limit: Tentukan batas atas khusus sesuai petunjuk untuk jumlah file yang dapat dimigrasikan per detik. Penting Kecepatan migrasi aktual tergantung pada beberapa faktor, seperti alamat data sumber, jaringan, pembatasan kecepatan di alamat data tujuan, dan ukuran file. Oleh karena itu, kecepatan migrasi aktual mungkin tidak mencapai batas atas yang ditentukan. Tentukan nilai yang wajar untuk batas atas bandwidth migrasi berdasarkan evaluasi alamat data sumber, tujuan migrasi, situasi bisnis, dan bandwidth jaringan. Pembatasan yang tidak tepat dapat memengaruhi kinerja bisnis.
   Overwrite Method	Ya	Menentukan apakah akan menimpa file di alamat data tujuan jika file tersebut memiliki nama yang sama dengan file di alamat data sumber. Nilai valid: Do not overwrite: tidak memigrasikan file di alamat data sumber. Overwrite All: menimpa file di alamat data tujuan. Overwrite based on the last modification time: Jika waktu modifikasi terakhir file di alamat data sumber lebih baru daripada file di alamat data tujuan, file di alamat data tujuan akan ditimpa. Jika waktu modifikasi terakhir file di alamat data sumber sama dengan file di alamat data tujuan, file di alamat data tujuan akan ditimpa jika file-file tersebut berbeda dari salah satu aspek berikut: ukuran dan header Content-Type. Peringatan Jika Anda memilih Overwrite based on the last modification time, tidak ada jaminan bahwa file baru tidak akan ditimpa oleh file lama, yang menciptakan risiko kehilangan pembaruan terbaru. Jika Anda memilih Overwrite based on the last modification time, pastikan bahwa file di alamat data sumber berisi informasi seperti waktu modifikasi terakhir, ukuran, dan header Content-Type. Jika tidak, kebijakan timpa mungkin menjadi tidak valid dan hasil migrasi tak terduga mungkin terjadi. Jika Anda memilih Jangan timpa atau Timpa berdasarkan waktu modifikasi terakhir, sistem mengirimkan permintaan ke alamat data sumber dan tujuan untuk mendapatkan informasi meta dan menentukan apakah akan menimpa file. Oleh karena itu, biaya permintaan dibebankan untuk alamat data sumber dan tujuan.
   Migration Report	Ya	Menentukan apakah akan mendorong laporan migrasi. Nilai valid: Do not push (default): tidak mendorong laporan migrasi ke bucket tujuan. Push: mendorong laporan migrasi ke bucket tujuan. Untuk informasi lebih lanjut, lihat Langkah Selanjutnya. Penting Laporan migrasi menggunakan ruang penyimpanan di alamat data tujuan. Laporan migrasi mungkin didorong dengan penundaan. Tunggu hingga laporan migrasi dibuat. ID unik dihasilkan untuk setiap eksekusi tugas. Laporan migrasi hanya didorong sekali. Kami menyarankan Anda untuk tidak menghapus laporan migrasi kecuali diperlukan.
   Migration Logs	Ya	Menentukan apakah akan mendorong log migrasi ke Layanan Log Sederhana (SLS). Nilai valid: Do not push (default): Tidak mendorong log migrasi. Push: Mendorong log migrasi ke SLS. Lihat log migrasi di Konsol SLS. Push only file error logs: Mendorong hanya log kesalahan migrasi ke SLS. Lihat log kesalahan migrasi di Konsol SLS. Jika Anda memilih Push atau Push only file error logs, Data Online Migration membuat proyek di SLS. Nama proyek tersebut dalam format aliyun-oss-import-log-ID Akun Alibaba Cloud-Wilayah Konsol Migrasi Data Online. Contoh: aliyun-oss-import-log-137918634953****-cn-hangzhou. Penting Untuk mencegah kesalahan dalam tugas migrasi, pastikan persyaratan berikut terpenuhi sebelum Anda memilih Push atau Push only file error logs: SLS telah diaktifkan. Anda telah mengonfirmasi otorisasi di halaman Authorize.
   Authorize	Tidak	Parameter ini ditampilkan jika Anda mengatur parameter Migration Logs ke Push atau Push only file error logs. Klik Authorize untuk masuk ke halaman Cloud Resource Access Authorization. Di halaman ini, klik Confirm Authorization Policy. Peran RAM AliyunOSSImportSlsAuditRole dibuat dan izin diberikan kepada peran RAM tersebut.
   File Name	Tidak	Filter berdasarkan nama file. Baik aturan inclusion maupun exclusion didukung. Namun, hanya sintaks ekspresi reguler tertentu yang didukung. Untuk informasi lebih lanjut tentang sintaks ekspresi reguler, kunjungi re2. Contoh: .*\.jpg$ menunjukkan semua file yang namanya diakhiri dengan .jpg. Secara default, ^file.* menunjukkan semua file yang namanya dimulai dengan file di direktori root. Jika awalan dikonfigurasikan untuk alamat data sumber dan awalannya adalah data/to/oss/, Anda perlu menggunakan filter ^data/to/oss/file.* untuk mencocokkan semua file yang namanya dimulai dengan file di direktori yang ditentukan. .*/picture/.* menunjukkan file yang jalurnya berisi subdirektori bernama picture. Penting Jika aturan inklusi dikonfigurasikan, semua file yang memenuhi aturan inklusi akan dimigrasikan. Jika beberapa aturan inklusi dikonfigurasikan, file akan dimigrasikan selama salah satu aturan inklusi terpenuhi. Sebagai contoh, file picture.jpg dan picture.png ada dan aturan inklusi .*\.jpg$ dikonfigurasikan. Hanya file picture.jpg yang akan dimigrasikan. Jika aturan inklusi .*\.png$ juga dikonfigurasikan pada saat yang sama, kedua file akan dimigrasikan. Jika aturan eksklusi dikonfigurasikan, semua file yang memenuhi aturan eksklusi tidak akan dimigrasikan. Jika beberapa aturan eksklusi dikonfigurasikan, file tidak akan dimigrasikan selama salah satu aturan eksklusi terpenuhi. Sebagai contoh, file picture.jpg dan picture.png ada dan aturan eksklusi .*\.jpg$ dikonfigurasikan. Hanya file picture.png yang akan dimigrasikan. Jika aturan eksklusi .*\.png$ juga dikonfigurasikan pada saat yang sama, tidak ada file yang akan dimigrasikan. Aturan eksklusi memiliki prioritas lebih tinggi daripada aturan inklusi. Jika sebuah file memenuhi baik aturan eksklusi maupun aturan inklusi, file tersebut tidak akan dimigrasikan. Sebagai contoh, file file.txt ada, dan aturan eksklusi .*\.txt$ serta aturan inklusi file.* dikonfigurasikan. Dalam hal ini, file tersebut tidak akan dimigrasikan.
   File Modification Time	Tidak	Filter berdasarkan waktu modifikasi terakhir file. Anda dapat menentukan waktu modifikasi terakhir sebagai aturan filter. Jika Anda menentukan periode waktu, hanya file yang waktu modifikasi terakhirnya berada dalam periode waktu yang ditentukan yang akan dimigrasikan. Contoh: Jika Anda menentukan 1 Januari 2019 sebagai waktu mulai dan tidak menentukan waktu akhir, hanya file yang waktu modifikasi terakhirnya tidak lebih awal dari 1 Januari 2019 yang akan dimigrasikan. Jika Anda menentukan 1 Januari 2022 sebagai waktu akhir dan tidak menentukan waktu mulai, hanya file yang waktu modifikasi terakhirnya tidak lebih lambat dari 1 Januari 2022 yang akan dimigrasikan. Jika Anda menentukan 1 Januari 2019 sebagai waktu mulai dan 1 Januari 2022 sebagai waktu akhir, hanya file yang waktu modifikasi terakhirnya tidak lebih awal dari 1 Januari 2019 dan tidak lebih lambat dari 1 Januari 2022 yang akan dimigrasikan.
   Execution Time	Tidak	Penting Jika eksekusi saat ini dari tugas migrasi belum selesai pada waktu mulai yang dijadwalkan berikutnya, tugas akan memulai eksekusi berikutnya pada waktu mulai yang dijadwalkan berikutnya setelah migrasi saat ini selesai. Proses ini berlanjut hingga tugas dijalankan sejumlah kali yang ditentukan. Jika Data Online Migration diterapkan di wilayah Tiongkok (Hong Kong) atau wilayah di daratan Tiongkok, hingga 10 tugas migrasi bersamaan didukung. Jika Data Online Migration diterapkan di wilayah di luar Tiongkok, hingga lima tugas migrasi bersamaan didukung. Jika jumlah tugas bersamaan melebihi batas, eksekusi tugas mungkin tidak selesai sesuai jadwal. Waktu ketika tugas migrasi dijalankan. Nilai valid: Immediately: Tugas segera dijalankan. Scheduled Task: Tugas dijalankan dalam periode waktu yang ditentukan setiap hari. Secara default, tugas dimulai pada waktu mulai yang ditentukan dan dihentikan pada waktu berhenti yang ditentukan. Periodic Scheduling: Tugas dijalankan berdasarkan frekuensi eksekusi dan jumlah kali eksekusi yang Anda tentukan. Frekuensi Eksekusi: Tentukan frekuensi eksekusi tugas. Nilai valid: Setiap Jam, Setiap Hari, Setiap Minggu, Hari Tertentu dalam Seminggu, dan Kustom. Untuk informasi lebih lanjut, lihat bagian Frekuensi eksekusi yang didukung dari topik ini. Eksekusi: Tentukan jumlah maksimum kali eksekusi tugas sesuai petunjuk. Secara default, jika Anda tidak menentukan parameter ini, tugas dijalankan sekali. Penting Anda dapat secara manual memulai dan menghentikan tugas kapan saja. Hal ini tidak terpengaruh oleh waktu eksekusi kustom tugas.

4. Baca Perjanjian Migrasi Data Online. Pilih I have read and agree to the Alibaba Cloud International Website Product Terms of Service. dan I have understood that when the migration task is complete, the migrated data may be different from the source data. Therefore, I have the obligation and responsibility to confirm the consistency between the migrated data and source data. Alibaba Cloud is not responsible for the confirmation of the consistency between the migrated data and source data. Kemudian, klik Berikutnya.

5. Verifikasi bahwa konfigurasi sudah benar dan klik OK. Tugas migrasi berhasil dibuat.

Frekuensi eksekusi yang didukung

Langkah 5: Verifikasi data