Object Storage Service：Fitur baru ossfs V1.91.2

Mode baca langsung

Ketika menggunakan ossfs untuk membaca objek dalam Bucket OSS, ossfs secara otomatis mengunduh objek dari bucket, menulisnya ke disk lokal sebagai file, dan mengembalikan file tersebut dari disk lokal. Dalam ossfs, penulisan disk bersifat asinkron, artinya file yang diunduh pertama-tama ditulis ke page cache di memori sebelum secara asinkron di-flush ke disk lokal. Jika terjadi cache hit saat membaca file, file tersebut langsung disajikan dari cache.

Secara default, ossfs menyimpan semua data yang diunduh sebelumnya di disk lokal hingga ruang disk yang tersedia habis.

• Jika ukuran memori mencukupi, semua data yang diunduh akan ditulis ke page cache. Kinerja baca hanya bergantung pada lebar pita jaringan mesin, bukan pada lebar pita disk.

• Jika ukuran memori tidak cukup untuk menampung seluruh file, file tersebut ditulis ke disk lokal dan disajikan dari disk untuk memproses permintaan baca. Akibatnya, kinerja baca bergantung pada lebar pita disk dan lebar pita jaringan, dengan lebar pita disk menjadi batasan utama kinerja.

Dalam mode baca default, kinerja membaca file besar dibatasi oleh lebar pita disk. Untuk mengatasi batasan ini, ossfs mendukung mode baca langsung.

• Dalam mode baca langsung, ossfs mengunduh data ke buffer memori dan melayani permintaan baca dari buffer tersebut. Mode ini menghilangkan keterlibatan disk dalam proses pembacaan, sehingga meningkatkan kinerja baca berurutan yang memanfaatkan lebar pita jaringan.

• Dalam mode baca langsung, ossfs mengelola data yang diunduh dalam chunk. Ukuran setiap chunk adalah 4 MB secara default dan dapat diubah menggunakan parameter direct_read_chunk_size. Di dalam memori, ossfs mempertahankan data dalam rentang dari chunk sebelumnya hingga direct_read_prefetch_chunks setelah chunk saat ini. Jika offset operasi baca berikutnya melebihi rentang ini, ossfs membuang data yang sudah diunduh dan mulai melakukan prefetch dari offset baru.

Mode baca langsung hanya cocok untuk pembacaan berurutan dan tidak berlaku dalam skenario berikut:

• Pembacaan acak: ossfs hanya menyimpan data dalam jendela offset saat ini. Jika offset pembacaan acak tidak termasuk dalam jendela tersebut, data diunduh dan dilepaskan berkali-kali, yang mengonsumsi sumber daya jaringan secara tidak efisien dan menurunkan kinerja baca. Oleh karena itu, mode baca langsung tidak cocok untuk skenario dengan banyak operasi baca acak.

• Penulisan: ossfs tetap menulis data ke disk lokal terlebih dahulu. Jika permintaan penulisan file terjadi selama operasi baca langsung pada file tersebut, ossfs secara otomatis beralih ke mode baca default, di mana file pertama-tama diunduh ke disk lokal. Operasi penulisan pada file selama operasi baca langsung tidak menyebabkan file lain keluar dari mode baca langsung.

Tabel berikut menjelaskan parameter yang terkait dengan mode baca langsung.