Topik ini menjelaskan stabilitas dan batasan versi baru dari pengiriman data Object Storage Service (OSS).
Stabilitas
Data dibaca dari Simple Log Service
Fitur Stabil | Deskripsi |
Ketersediaan | Ketersediaan tinggi disediakan. Jika pekerjaan pengiriman data OSS gagal membaca data dari Simple Log Service karena kesalahan di Simple Log Service, pekerjaan tersebut akan dicoba kembali setidaknya 10 kali. Jika pekerjaan masih gagal, kesalahan dilaporkan, dan pekerjaan dimulai ulang. |
Penulisan data ke OSS
Stabilitas | Deskripsi |
Konkurensi | Instansi pengiriman data dapat dibuat berdasarkan shard, dan sumber daya yang digunakan untuk pengiriman data dapat diperluas. Jika shard dalam Logstore sumber dari instansi pengiriman data dibagi, sumber daya yang diperlukan dapat diperluas dalam beberapa detik untuk mempercepat proses ekspor data. |
Konsistensi data | Sumber daya yang diperlukan diperluas berdasarkan konsumen groups yang ditentukan untuk memastikan konsistensi data. Offset hanya dikirimkan setelah data dikirim ke OSS. Hal ini membantu memastikan bahwa semua data dikirim ke OSS. |
Pemantauan dan peringatan
Item | Deskripsi |
Pemantauan dan peringatan | Anda dapat memantau pekerjaan pengiriman data secara real-time berdasarkan metrik seperti latensi dan lalu lintas pekerjaan pengiriman data. Anda dapat mengonfigurasi peringatan kustom sesuai kebutuhan untuk melaporkan pengecualian yang terjadi selama pengiriman data secepat mungkin. Misalnya, jika instans pengiriman data yang digunakan untuk mengekspor data tidak mencukupi atau kuota jaringan terlampaui, peringatan akan dipicu. Untuk informasi lebih lanjut, lihat Mengonfigurasi aturan pemantauan peringatan untuk memantau pekerjaan pengiriman data versi baru untuk OSS. |
Batasan
Jaringan
Batasan | Deskripsi |
Tipe jaringan | Transfer data melalui jaringan internal Alibaba Cloud cepat dan stabil. |
Manajemen izin
Batasan | Deskripsi |
Otorisasi | Izin untuk mengirim data ke OSS dan mengakses data harus diberikan. Untuk informasi lebih lanjut, lihat Authorization overview. |
Enkripsi sisi server | Jika enkripsi sisi server diaktifkan, Anda harus memberikan izin tambahan kepada peran Resource Access Management (RAM) yang terlibat. Untuk informasi lebih lanjut, lihat Dokumentasi konfigurasi OSS. |
Lalu lintas baca
Batasan | Deskripsi |
Lalu lintas baca | Simple Log Service menetapkan batas maksimum pada lalu lintas baca dalam satu proyek dan satu shard. Untuk informasi lebih lanjut, lihat Data read and write. Jika batas terlampaui, Anda harus membagi shard atau mengajukan permohonan untuk meningkatkan batas dalam proyek Anda. Jika pekerjaan pengiriman data OSS gagal membaca data karena batas terlampaui, pekerjaan tersebut akan dicoba kembali setidaknya 10 kali. Jika pekerjaan masih gagal, kesalahan dilaporkan, dan pekerjaan dimulai ulang. |
Penulisan data ke OSS
Batasan | Deskripsi |
Instansi konkuren | Jumlah instansi konkuren harus sama dengan jumlah shard. Shard termasuk shard readwrite dan readonly. |
Batas pengiriman |
|
Partisi waktu | Dalam pekerjaan pengiriman data, data dikirim ke OSS dengan melakukan beberapa operasi pengiriman. Setiap operasi pengiriman data mengirim data ke OSS dan menyimpan data ke objek OSS yang berbeda. Jalur ke objek OSS ditentukan oleh titik waktu paling awal saat Simple Log Service menerima data yang dikirim ke objek OSS. Titik waktu ini ditentukan oleh receive_time. |
Format file | Setelah data dikirim ke OSS, data dapat disimpan dalam salah satu format berikut: CSV, JSON, Parquet, dan ORC. Untuk informasi lebih lanjut, lihat format JSON, format CSV, format Parquet, dan format ORC. |
Metode kompresi | Metode kompresi berikut didukung: snappy, gzip, dan zstd. Non-kompresi juga didukung. |
OSS bucket |
|
Item konfigurasi
Batasan | Deskripsi |
Latensi pengiriman | shipping latency tidak boleh melebihi periode retensi data Logstore saat ini. Kami merekomendasikan agar Anda menyediakan periode buffer untuk mencegah kehilangan data. Misalnya, jika periode retensi data Logstore adalah 30 hari, kami merekomendasikan agar Anda menetapkan latensi pengiriman ke nilai yang kurang dari atau sama dengan 25 hari. |
Manajemen pengiriman data
Batasan | Deskripsi |
Pemberhentian pekerjaan pengiriman data | Jika Anda menghentikan sementara pekerjaan pengiriman data, pekerjaan tersebut mencatat kursor log terakhir yang dikirim. Setelah Anda melanjutkan pekerjaan, pekerjaan tersebut akan melanjutkan pengiriman log dari kursor yang dicatat. Simple Log Service menerapkan mekanisme berikut ketika Anda menghentikan sementara pekerjaan pengiriman data:
|