全部产品
Search
文档中心

:Migrasi data dari IDC lokal ke OSS

更新时间:Jul 06, 2025

Topik ini menjelaskan cara memigrasikan data dari IDC lokal ke OSS.

Informasi latar belakang

Sebuah perusahaan e-commerce menggunakan Fast Distributed File System (FastDFS) untuk menyimpan data di IDC yang dibuat pengguna. Data tersebut mencakup sekitar 30.000.000 file dengan total ukuran sekitar 300 TB. Perusahaan tersebut telah menghubungkan IDC lokal ke VPC di China (Shenzhen) menggunakan Alibaba Cloud Express Connect.

Perusahaan A ingin beralih ke OSS karena kebutuhan pengembangan. Untuk memastikan kelangsungan bisnis, kebutuhan berikut harus dipenuhi selama proses migrasi ini:
  • Selama migrasi, Anda harus menghindari dampak pada akses data normal oleh pengguna.
  • Setelah pekerjaan migrasi selesai, Anda harus memeriksa integritas data untuk memastikan transisi bisnis yang mulus ke OSS.

Solusi migrasi

Berdasarkan informasi latar belakang, Anda dapat memigrasikan data sebagai berikut:
  1. Buat Bucket OSS di wilayah China (Shenzhen) dan ubah lokasi penyimpanan default ke alamat data bucket ini.
  2. Gunakan modul FastDFS NGINX bawaan untuk mengekspor semua file yang akan dimigrasikan ke daftar URL HTTP, dan Anda dapat mengakses URL tersebut di VPC.

    URL HTTP dipisahkan per baris, dengan setiap baris menunjukkan satu file. Pisahkan beberapa URL dengan line feed (\n). Untuk informasi lebih lanjut tentang formatnya, lihat Migrasi Data dari Sumber HTTP dan HTTPS ke OSS.

  3. Gunakan Data Transport untuk memigrasikan data dari IDC lokal ke OSS.
  4. Beralihlah ke OSS setelah migrasi selesai.

Langkah 1: Buat bucket dan modifikasi lokasi penyimpanan

  1. Di wilayah China (Shenzhen), buat bucket untuk menyimpan data. Untuk informasi lebih lanjut, lihat Buat Bucket.
  2. Konfigurasikan kebijakan bucket dan hanya aktifkan akses ke bucket dari karyawan perusahaan. Untuk informasi lebih lanjut, lihat Konfigurasikan Kebijakan Bucket untuk Memberi Otorisasi kepada Pengguna Lain Mengakses Sumber Daya OSS.
  3. Beritahukan karyawan untuk mengubah lokasi penyimpanan default ke bucket.

Langkah 2: Buat pekerjaan migrasi

  1. Buat pengguna RAM dan berikan izin kepada pengguna RAM untuk membuat pekerjaan migrasi. Untuk informasi lebih lanjut, lihat Buat dan Otorisasi Pengguna RAM.
  2. Masuk ke Konsol Data Transport sebagai pengguna RAM baru.
  3. Buat alamat data sumber HTTP. Untuk informasi lebih lanjut, lihat Buat Alamat Data Sumber.
    Saat membuat alamat data sumber HTTP, Anda harus memilih Use untuk Whether to Use VPC dan tentukan VPC. Untuk memastikan migrasi berhasil, Anda harus menentukan VPC untuk mengakses URL HTTP. Gambar berikut menunjukkan detail konfigurasi.Create an HTTP source data address
  4. Buat alamat data tujuan OSS. Untuk informasi lebih lanjut, lihat Buat Alamat Data Tujuan.
    Create a destination data address
  5. Buat pekerjaan migrasi penuh dan konfigurasikan parameter di langkah Kinerja. Untuk informasi lebih lanjut, lihat Buat Pekerjaan Migrasi.
    Catatan Berdasarkan bandwidth yang tersedia yang disediakan oleh perusahaan, proses migrasi membutuhkan sekitar dua hari. Dalam praktiknya, Anda dapat menetapkan batas aliran yang sesuai berdasarkan penggunaan bandwidth.
  6. Untuk memastikan bahwa semua data dimigrasikan setelah migrasi, Anda perlu melihat laporan migrasi dan membandingkan data di kedua alamat data sumber dan alamat data tujuan.
    Catatan Untuk informasi lebih lanjut tentang cara menyelesaikan masalah migrasi, lihat Penyebab Umum Kegagalan Migrasi dan Solusi.

Langkah 3: Beralih bisnis ke OSS

Setelah migrasi selesai, Anda dapat mengubah alamat data tempat aplikasi bisnis mengambil data ke OSS. Kemudian, Anda dapat menyimpan dan mengelola data di OSS.