Data Online Migration:Migrasikan data antar bucket OSS

Sebelum memulai

• Login ke Konsol Data Online Migration sebagai Pengguna Resource Access Management (RAM) yang dibuat khusus untuk migrasi data. Untuk migrasi lintas akun, login sebagai Pengguna RAM yang dibuat di akun Alibaba Cloud sumber atau tujuan.

• Siapkan otorisasi peran RAM untuk bucket sumber dan tujuan. Untuk detailnya, lihat Otorisasi peran RAM di Konsol Data Online Migration atau Otorisasi manual.

• Untuk mendorong log migrasi ke Simple Log Service (SLS), aktifkan SLS dan selesaikan otorisasi di halaman Authorize sebelum membuat tugas migrasi.

Catatan penggunaan

• Perilaku API sumber: Data Online Migration mengakses alamat data sumber melalui API publik yang disediakan oleh penyedia layanan penyimpanan sumber. Perilaku aktual tergantung pada implementasi API penyedia tersebut.

• Dampak terhadap resource: Migrasi mengonsumsi resource di alamat data sumber dan tujuan serta dapat memengaruhi beban kerja bisnis. Aktifkan throttling atau jalankan tugas selama jam sepi untuk mengurangi dampaknya.

• Perilaku overwrite: Sebelum tugas dimulai, Data Online Migration membandingkan file di sumber dan tujuan. Jika file di sumber dan tujuan memiliki nama yang sama, memilih opsi Overwrite All akan menimpa file tujuan. Jika file dengan nama yang sama berisi data berbeda dan file tujuan harus dipertahankan, ubah nama salah satu file atau cadangkan file tujuan terlebih dahulu.

• Interaksi lifecycle: Atribut LastModifyTime file sumber dipertahankan setelah migrasi. Jika aturan lifecycle dikonfigurasi pada bucket tujuan, file yang dimigrasikan yang waktu modifikasi terakhirnya berada dalam jendela aturan tersebut mungkin dihapus atau diarsipkan ke kelas penyimpanan tertentu.

Batasan

• Perilaku pemindaian hosting website statis: Jika hosting website statis diaktifkan untuk file sumber, pemindaian migrasi mungkin mendeteksi objek direktori yang sebenarnya tidak ada. Misalnya, jika myapp/resource/1.jpg ada, pemindaian juga mungkin mengembalikan myapp/ dan myapp/resource/. Objek direktori yang tidak ada gagal dimigrasikan, sedangkan myapp/resource/1.jpg dimigrasikan seperti yang diharapkan.

• Symbolic link: Symbolic link di alamat data sumber dimigrasikan langsung ke alamat data tujuan. Untuk detailnya, lihat Symbolic links.

• Cakupan tugas: Setiap tugas hanya dapat memigrasikan data dari satu bucket. Satu tugas tidak dapat memigrasikan semua data dalam akun Anda.

• Dukungan migrasi atribut: Hanya atribut tertentu yang dimigrasikan antar bucket OSS.

  • Dimigrasikan: x-oss-meta-*, LastModifyTime, Content-Type, Cache-Control, Content-Encoding, Content-Disposition, Content-Language, dan Expires.

  • Tidak dimigrasikan (termasuk namun tidak terbatas pada): StorageClass, Acl, pengaturan enkripsi sisi server, Tagging, dan x-oss-persistent-headers yang ditentukan pengguna.

  Catatan

  Daftar ini tidak lengkap. Verifikasi hasil migrasi aktual untuk mengidentifikasi atribut tambahan yang tidak dimigrasikan.

Langkah 1: Pilih wilayah

Wilayah yang Anda pilih di Konsol Data Online Migration menentukan apakah Anda dikenai biaya untuk membaca data dari bucket OSS sumber.

• Jika bucket OSS sumber berada di wilayah konsol yang dipilih, tidak ada biaya baca Internet yang dikenakan.

  Catatan

  Contohnya, jika bucket OSS sumber dan tujuan keduanya berada di wilayah China (Beijing) dan Anda memilih wilayah China (Beijing) di Konsol Data Online Migration, tidak ada biaya yang dikenakan untuk membaca data dari bucket OSS sumber melalui Internet selama migrasi.

  

• Jika bucket OSS sumber berada di wilayah berbeda dari wilayah konsol yang dipilih, biaya baca Internet akan dikenakan.

  Catatan

  Contohnya, jika Anda memigrasikan data dari bucket OSS di wilayah China (Beijing) ke bucket OSS di wilayah Singapura, dan Anda memilih wilayah Singapura di Konsol Data Online Migration, biaya akan dikenakan untuk membaca data dari bucket OSS sumber melalui Internet.

  

Langkah 2: Buat alamat data sumber

1. Di panel navigasi sebelah kiri, pilih Data Online Migration > Address Management. Di halaman Address Management, klik Create Address.

2. Di panel Create Address, konfigurasikan parameter berikut dan klik OK.

   Parameter	Wajib	Deskripsi
   Name	Ya	Nama alamat data sumber. Panjangnya harus 3 hingga 63 karakter, case-sensitive. Dapat berisi huruf kecil, angka, tanda hubung (-), dan garis bawah (_). Dikodekan dalam format UTF-8. Tidak boleh diawali dengan tanda hubung (-) atau garis bawah (_).
   Type	Ya	Pilih Alibaba OSS.
   Custom Domain Name	Tidak	Menentukan apakah nama domain kustom didukung.
   Region	Ya	Wilayah alamat data sumber. Contoh: China (Hangzhou).
   Authorize Role	Ya	Berikan izin kepada peran RAM untuk mengakses bucket sumber. Metodenya tergantung pada apakah bucket sumber milik akun saat ini. Akun yang sama: Buat dan otorisasi peran RAM di Konsol Data Online Migration. Untuk detailnya, lihat Otorisasi peran RAM di Konsol Data Online Migration. Atau, lampirkan kebijakan secara manual di konsol RAM. Untuk detailnya, lihat Otorisasi manual. Cross-account: Lampirkan kebijakan ke peran RAM di konsol OSS. Untuk detailnya, lihat Bucket sumber eksternal.
   Bucket	Ya	Nama bucket OSS yang menyimpan data yang akan dimigrasikan.
   Prefix	Tidak	Awalan alamat data sumber. Tentukan awalan untuk memigrasikan data tertentu. Tidak boleh diawali dengan garis miring (/) tetapi harus diakhiri dengan garis miring (/). Contoh: data/to/oss/. Dengan awalan: Jika Anda mengatur awalan sumber menjadi example/src/ dan awalan tujuan menjadi example/dest/, file bernama example.jpg di example/src/ dimigrasikan ke example/dest/example.jpg. Tanpa awalan: Jika tidak ada awalan sumber yang ditentukan, jalur sumber lengkap dipertahankan. Misalnya, srcbucket/example.jpg dengan awalan tujuan destbucket/ dimigrasikan ke destbucket/srcbucket/example.jpg.
   Tunnel	Tidak	Saluran data yang digunakan. Penting Diperlukan hanya ketika Anda memigrasikan data menggunakan sirkuit Express Connect atau gerbang VPN, atau memigrasikan data dari database yang dikelola sendiri ke cloud. Jika data di alamat data tujuan disimpan di sistem file lokal, atau Anda perlu memigrasikan data melalui sirkuit Express Connect di lingkungan seperti Alibaba Finance Cloud atau Apsara Stack, buat dan deploy agen.
   Agent	Tidak	Agen yang digunakan. Penting Diperlukan hanya ketika Anda memigrasikan data menggunakan sirkuit Express Connect atau gerbang VPN, atau memigrasikan data dari database yang dikelola sendiri ke cloud. Pilih hingga 200 agen untuk saluran data tertentu sekaligus.

Langkah 3: Buat alamat data tujuan

1. Di panel navigasi sebelah kiri, pilih Data Online Migration > Address Management. Di halaman Address Management, klik Create Address.

2. Di panel Create Address, konfigurasikan parameter berikut dan klik OK.

   Parameter	Wajib	Deskripsi
   Name	Ya	Nama alamat data tujuan. Panjangnya harus 3 hingga 63 karakter, case-sensitive. Dapat berisi huruf kecil, angka, tanda hubung (-), dan garis bawah (_). Dikodekan dalam format UTF-8. Tidak boleh diawali dengan tanda hubung (-) atau garis bawah (_).
   Type	Ya	Pilih Alibaba OSS.
   Custom Domain Name	Tidak	Menentukan apakah nama domain kustom didukung.
   Region	Ya	Wilayah alamat data tujuan. Contoh: China (Hangzhou).
   Authorize Role	Ya	Berikan izin kepada peran RAM untuk mengakses bucket tujuan. Metodenya tergantung pada apakah bucket tujuan milik akun saat ini. Akun yang sama: Buat dan otorisasi peran RAM di Konsol Data Online Migration. Untuk detailnya, lihat Otorisasi peran RAM di Konsol Data Online Migration. Atau, lampirkan kebijakan secara manual di konsol RAM. Untuk detailnya, lihat "Langkah 4: Berikan izin pada bucket tujuan kepada peran RAM" di topik Persiapan. Cross-account: Lampirkan kebijakan ke peran RAM di konsol OSS. Untuk detailnya, lihat "Langkah 4: Berikan izin pada bucket tujuan kepada peran RAM" di topik Persiapan.
   Bucket	Ya	Nama bucket OSS tempat data dimigrasikan.
   Prefix	Tidak	Awalan alamat data tujuan. Tentukan awalan untuk memigrasikan data ke jalur tertentu. Tidak boleh diawali dengan garis miring (/) tetapi harus diakhiri dengan garis miring (/). Contoh: data/to/oss/. Dengan awalan: Jika Anda mengatur awalan sumber menjadi example/src/ dan awalan tujuan menjadi example/dest/, file bernama example.jpg di example/src/ dimigrasikan ke example/dest/example.jpg. Tanpa awalan: Jika tidak ada awalan tujuan yang ditentukan, data sumber dimigrasikan ke direktori root bucket tujuan.
   Tunnel	Tidak	Saluran data yang digunakan. Penting Diperlukan hanya ketika Anda memigrasikan data menggunakan sirkuit Express Connect atau gerbang VPN, atau memigrasikan data dari database yang dikelola sendiri ke cloud. Jika data di alamat data tujuan disimpan di sistem file lokal, atau Anda perlu memigrasikan data melalui sirkuit Express Connect di lingkungan seperti Alibaba Finance Cloud atau Apsara Stack, buat dan deploy agen.
   Agent	Tidak	Agen yang digunakan. Penting Diperlukan hanya ketika Anda memigrasikan data menggunakan sirkuit Express Connect atau gerbang VPN, atau memigrasikan data dari database yang dikelola sendiri ke cloud. Pilih hingga 200 agen untuk saluran data tertentu sekaligus.

Langkah 4: Buat tugas migrasi

1. Di panel navigasi sebelah kiri, pilih Data Online Migration > Migration Tasks. Di halaman Migration Tasks, klik Create Task.

2. Di langkah Select Address, konfigurasikan parameter berikut.

   Parameter	Wajib	Deskripsi
   Name	Ya	Nama tugas migrasi. Panjangnya harus 3 hingga 63 karakter, case-sensitive. Dapat berisi huruf kecil, angka, tanda hubung (-), dan garis bawah (_). Dikodekan dalam format UTF-8. Tidak boleh diawali dengan tanda hubung (-) atau garis bawah (_).
   Source Address	Ya	Alamat data sumber yang telah Anda buat.
   Destination Address	Ya	Alamat data tujuan yang telah Anda buat.

3. Di langkah Task Configurations, konfigurasikan parameter berikut.

   Parameter	Required	Description
   Pengaturan Dasar
   Migration Bandwidth	Tidak	Batas bandwidth maksimum untuk tugas migrasi. Opsi: Default: Gunakan batas atas default. Bandwidth aktual tergantung pada ukuran dan jumlah file. Specify an upper limit: Tetapkan batas atas kustom sesuai petunjuk. Penting Kecepatan migrasi aktual tergantung pada alamat data sumber, kondisi jaringan, throttling tujuan, dan ukuran file. Kecepatan aktual mungkin tidak mencapai batas yang ditentukan. Tetapkan nilai yang wajar berdasarkan alamat data sumber, tujuan migrasi, kebutuhan bisnis, dan bandwidth jaringan. Throttling yang tidak tepat dapat memengaruhi kinerja bisnis.
   Files Migrated Per Second	Tidak	Jumlah maksimum file yang dimigrasikan per detik. Opsi: Default: Gunakan batas atas default. Specify an upper limit: Tetapkan batas atas kustom sesuai petunjuk. Penting Kecepatan migrasi aktual tergantung pada alamat data sumber, kondisi jaringan, throttling tujuan, dan ukuran file. Kecepatan aktual mungkin tidak mencapai batas yang ditentukan. Tetapkan nilai yang wajar berdasarkan alamat data sumber, tujuan migrasi, kebutuhan bisnis, dan bandwidth jaringan. Throttling yang tidak tepat dapat memengaruhi kinerja bisnis.
   Overwrite Mode	Ya	Apakah akan menimpa file tujuan yang memiliki nama sama dengan file sumber. Opsi: Do not overwrite: Tidak memigrasikan file sumber. Overwrite All: Menimpa file tujuan. Overwrite based on the last modification time: Menimpa file tujuan jika file sumber dimodifikasi lebih baru. Jika waktu modifikasi sama, timpa file tujuan jika ukuran atau header Content-Type berbeda. Peringatan Jika Anda memilih Overwrite based on the last modification time, file yang lebih baru mungkin tetap ditimpa oleh file yang lebih lama, sehingga berisiko kehilangan pembaruan terbaru. Pastikan file sumber memiliki informasi last modification time, size, dan header Content-Type. Jika tidak, kebijakan overwrite dapat menghasilkan hasil yang tidak terduga. Jika Anda memilih Do not overwrite atau Overwrite based on the last modification time, sistem mengambil informasi meta dari sumber dan tujuan untuk memutuskan apakah akan menimpa. Biaya permintaan berlaku untuk kedua alamat data.
   Mode Audit
   Migration Report	Ya	Apakah akan mendorong laporan migrasi. Opsi: Do not push (default): Tidak mendorong laporan ke bucket tujuan. Push: Mendorong laporan ke bucket tujuan. Untuk detailnya, lihat Langkah selanjutnya. Penting Laporan ini menempati storage space di tujuan. Laporan mungkin didorong dengan penundaan. Tunggu hingga laporan dihasilkan. ID unik dihasilkan untuk setiap eksekusi. Laporan hanya didorong sekali. Jangan hapus laporan kecuali benar-benar diperlukan.
   Migration Logs	Ya	Apakah akan mendorong log migrasi ke SLS. Opsi: Do not push (default): Tidak mendorong log. Push: Mendorong log ke SLS. Lihat log di konsol SLS. Push only file error logs: Hanya mengirim log kesalahan ke SLS. Lihat log tersebut di konsol SLS. Jika Anda memilih Push atau Push only file error logs, Data Online Migration membuat proyek SLS bernama aliyun-oss-import-log-{ID akun Alibaba Cloud}-{Wilayah}. Contoh: aliyun-oss-import-log-137918634953****-cn-hangzhou. Penting Sebelum memilih Push atau Push only file error logs, aktifkan SLS dan konfirmasi otorisasi di halaman Authorize.
   Authorize	Tidak	Ditampilkan ketika Migration Logs diatur ke Push atau Push only file error logs. Klik Authorize untuk menuju halaman Cloud Resource Access Authorization. Klik Confirm Authorization Policy. Peran RAM AliyunOSSImportSlsAuditRole dibuat dan izin diberikan.
   Filter
   File Name	Tidak	Filter file berdasarkan nama. Mendukung aturan inclusion dan exclusion. Hanya sintaks ekspresi reguler re2 yang didukung. Untuk detailnya, kunjungi re2. Contoh: .*\.jpg$: Semua file yang berakhiran .jpg. ^file.*: Semua file yang diawali file di direktori root. Jika awalan dikonfigurasi untuk alamat data sumber (misalnya, data/to/oss/), gunakan ^data/to/oss/file.* untuk mencocokkan file yang diawali file di direktori tersebut. .*/picture/.* : File yang jalurnya mengandung subdirektori bernama picture. Penting Jika aturan inklusi dikonfigurasi, semua file yang cocok dimigrasikan. Beberapa aturan inklusi dievaluasi dengan logika OR. Jika aturan eksklusi dikonfigurasi, semua file yang cocok dilewati. Beberapa aturan eksklusi dievaluasi dengan logika OR. Aturan eksklusi didahulukan daripada aturan inklusi. Jika file cocok dengan keduanya, file tersebut tidak dimigrasikan.
   File Modification Time	Tidak	Filter file berdasarkan waktu modifikasi terakhir. Jika rentang waktu ditentukan, hanya file yang waktu modifikasi terakhirnya berada dalam rentang tersebut yang akan dimigrasikan, sebagai berikut: Jika hanya waktu mulai diatur ke 1 Jan 2019 dan tidak ada waktu akhir yang ditentukan, hanya file dengan waktu modifikasi terakhir pada atau setelah 1 Jan 2019 yang akan dimigrasikan. Jika hanya waktu akhir diatur ke 1 Jan 2022 dan tidak ada waktu mulai yang ditentukan, hanya file dengan waktu modifikasi terakhir pada atau sebelum 1 Jan 2022 yang akan dimigrasikan. Jika waktu mulai adalah 1 Jan 2019 dan waktu akhir adalah 1 Jan 2022, hanya file dengan waktu modifikasi terakhir antara 1 Jan 2019 dan 1 Jan 2022 (inklusif) yang akan dimigrasikan.
   Konfigurasi Migrasi
   Last Modified Time	Ya	Apakah akan mempertahankan waktu modifikasi terakhir file sumber. Ya (default): Waktu modifikasi terakhir file sumber dipertahankan pada file tujuan. Tidak: Waktu modifikasi terakhir tidak dipertahankan.
   Convert from Appendable to Normal or Multipart	Tidak	Apakah akan mengonversi objek Appendable menjadi objek Normal atau Multipart. Ya: Objek Appendable dikonversi menjadi Normal atau Multipart saat dimigrasikan ke tujuan. Tidak: Objek tidak dikonversi. Objek Appendable tetap Appendable setelah migrasi. Penting Opsi ini hanya tersedia ketika akses daftar putih diaktifkan. Saat ini, hanya migrasi dari OSS ke OSS yang mendukung opsi ini.
   Add Target Storage Class	Tidak	Apakah akan menentukan kelas penyimpanan untuk file tujuan. Ditentukan: File yang dimigrasikan diatur ke kelas penyimpanan yang ditentukan. Kelas yang tersedia: Standard, Infrequent Access, Archive, Cold Archive, Deep Cold Archive. Tidak ditentukan (default): Tidak ada perubahan. File menggunakan kelas penyimpanan default tujuan. Penting Opsi ini hanya tersedia ketika akses daftar putih diaktifkan. Saat ini, hanya tugas dengan OSS sebagai tujuan yang mendukung opsi ini.
   Penjadwalan Tugas
   Execution Time	Tidak	Jadwal menjalankan tugas migrasi. Opsi: Immediately: Tugas dijalankan segera. Scheduled Task: Tugas dijalankan dalam periode waktu tertentu setiap hari. Tugas dimulai pada waktu mulai yang ditentukan dan berhenti pada waktu berhenti yang ditentukan. Periodic Scheduling: Tugas dijalankan berdasarkan frekuensi eksekusi dan jumlah eksekusi yang Anda tentukan. Execution Frequency: Every Hour, Every Day, Every Week, Certain Days of the Week, atau Custom. Untuk detailnya, lihat Frekuensi eksekusi yang didukung. Executions: Jumlah maksimum kali tugas dijalankan. Jika tidak ditentukan, tugas dijalankan sekali. Penting Jika eksekusi saat ini belum selesai pada waktu mulai terjadwal berikutnya, tugas memulai eksekusi berikutnya pada waktu mulai terjadwal berikutnya setelah migrasi saat ini selesai. Ini berlanjut hingga tugas dijalankan sejumlah kali yang ditentukan. Batas tugas konkuren per wilayah: hingga 10 di China, hingga 5 di luar China. Melebihi batas ini dapat menunda tugas atau mencegahnya menyelesaikan sesuai jadwal. Anda dapat memulai dan menghentikan tugas secara manual kapan saja, terlepas dari jadwal eksekusi.

4. Baca dan konfirmasi perjanjian Data Online Migration. Lalu klik Next.

5. Verifikasi konfigurasi dan klik OK. Tugas migrasi dibuat.

Langkah 5: Verifikasi data