Topik ini membandingkan versi lama dan versi baru pengiriman log ke OSS serta menjelaskan proses migrasi ke versi baru.
Perbandingan versi
|
Item |
Versi lama |
Versi baru |
|
Rentang waktu pengiriman data |
Mengirim data yang dihasilkan setelah pekerjaan pengiriman dibuat. |
|
|
Jumlah pekerjaan |
Anda hanya dapat membuat satu pekerjaan pengiriman per Logstore. |
Anda dapat membuat multiple pekerjaan pengiriman per Logstore. |
|
Dukungan zona waktu untuk direktori berbasis tanggal |
Tidak didukung |
Didukung |
|
Jenis kompresi |
snappy |
snappy, gzip, dan zstd |
|
Format file |
JSON, CSV, dan Parquet |
JSON, CSV, Parquet, dan ORC |
|
Dashboard |
Tidak didukung |
Didukung |
|
Monitoring dan Peringatan |
Tidak didukung |
Didukung |
|
Jeda dan lanjutkan pekerjaan |
Tidak didukung |
Didukung |
|
Latensi pengiriman |
Tidak didukung |
Didukung |
Migrasi ke versi baru
Versi lama dan versi baru pengiriman ke OSS berjalan secara paralel dan menggunakan entry point yang sama. Ikuti langkah-langkah berikut untuk melakukan migrasi.
-
Hentikan pekerjaan pengiriman lama.
-
Buat pekerjaan pengiriman baru.
Untuk informasi selengkapnya, lihat Create an OSS data shipping job (new version).
PentingSaat mengonfigurasi parameter Start At untuk pekerjaan baru, atur Waktu mulai 5 hingga 15 menit sebelum Anda menghentikan pekerjaan lama. Offset yang tepat bergantung pada Shipping Interval pekerjaan lama. Metode ini mencegah loss data, meskipun dapat menyebabkan duplikasi data minor.
Sebagai contoh, jika Shipping Interval pekerjaan lama adalah 300 detik dan Anda menghentikannya pada pukul 12.00.00 tanggal 20 Desember 2023, atur Start At untuk pekerjaan baru menjadi 2023-12-20 11:55:00.