Komponen ack-fluid merupakan mesin orkestrasi dan akselerasi dataset terdistribusi dalam suite AI cloud-native. Komponen ini menyediakan fitur seperti abstraksi dataset, akses dan akselerasi data, serta orkestrasi dan penjadwalan data untuk aplikasi yang intensif data di lingkungan cloud-native. ack-fluid menyederhanakan manajemen data dalam produksi AI dan meningkatkan efisiensi akses data untuk pelatihan dan inferensi model. Topik ini menjelaskan informasi dasar, catatan penggunaan, serta catatan rilis komponen ack-fluid.
Pengenalan komponen
ack-fluid mendefinisikan CustomResourceDefinitions (CRDs) Kubernetes, seperti Dataset dan Runtime, yang memungkinkan Anda mengkueri dan mengelola siklus hidup data di kluster menggunakan metode native Kubernetes.
ack-fluid mempercepat akses ke data aplikasi di kluster dengan mengorkestrasikan dan mengelola sistem cache terdistribusi. Fluid mendukung berbagai sistem cache terdistribusi sebagai runtime, seperti Alluxio, JuiceFS, JindoFS, dan EFC. Fluid juga mendukung ThinRuntime, yaitu implementasi sistem penyimpanan generik dan dapat diperluas. ThinRuntime memungkinkan Anda menghubungkan sistem penyimpanan yang dikelola sendiri secara low-code serta memanfaatkan kembali kemampuan inti Fluid, seperti orkestrasi data, manajemen, dan akses platform.
ack-fluid menyediakan API akses data terstandarisasi. Anda dapat memasang persistent volume claims (PVCs) tertentu ke Pod untuk mengakses data di dalam kontainer. Fluid menggunakan plugin Fluid CSI untuk memasang sistem penyimpanan di lingkungan Kubernetes standar dan plugin Fluid FUSE Sidecar di lingkungan Kubernetes serverless, sehingga mengabstraksikan perbedaan antar lingkungan runtime yang mendasarinya.
Untuk informasi lebih lanjut, lihat Dataset elastis.
Catatan penggunaan
Komponen ack-fluid hanya mendukung kluster ACK Pro, kluster ACK Serverless Pro, dan kluster ACK Edge Pro yang menjalankan Kubernetes versi 1.18 atau lebih baru. Untuk informasi lebih lanjut tentang cara menginstal dan menggunakan komponen ack-fluid, lihat Accelerate data access.
Catatan rilis
April 2024
Versi | Detail Perubahan | Waktu Modifikasi | Dampak |
v1.0.8 | Fluid kini mendukung pemasangan dataset dinamis. Titik pemasangan dataset untuk semua PV dan PVC yang dirujuk dalam kontainer dapat diperbarui secara otomatis dan dipasang secara dinamis. | 25 April 2024 | Tidak ada dampak pada beban kerja. |
Februari 2024
Versi | Perubahan | Waktu Modifikasi | Dampak |
v1.0.7 | JindoRuntime ditingkatkan untuk menggunakan JindoCache sebagai mesin cache default. Mendukung semantik penjadwalan afinitas klien FUSE. Memperbaiki masalah di mana izin read-only default dataset tidak diteruskan ke klien ThinRuntime. Mendukung pengaktifan otomatis komponen control plane berdasarkan jenis resource kluster. Menambah keamanan komponen Fluid.
| 4 Februari 2024 | Tidak ada dampak pada beban kerja. |
Desember 2023
Versi | Apa Saja yang Berubah | Waktu Modifikasi | Dampak |
v1.0.6 | Operasi data kini mendukung pengaturan permintaan dan batas resource. Mendukung konfigurasi kebijakan penjadwalan afinitas multi-level secara kustom. JindoRuntime kini mendukung akses data terakselerasi untuk volume PV dan hostPath.
| 14 Desember 2023 | Tidak ada dampak pada beban kerja. |
November 2023
Versi | Perubahan | Waktu Perubahan | Dampak |
v1.0.5 | Memperbaiki masalah propagasi titik pemasangan di plugin Fluid CSI. Mendukung kebijakan penjadwalan afinitas multi-level. JindoRuntime kini mendukung penyimpanan persisten untuk metadata komponen Master. JuiceFSRuntime kini mendukung pembaruan dinamis untuk komponen FUSE. Operasi data kini mendukung fitur reklamasi terjadwal. Pod untuk pekerjaan upgrade CRD otomatis dapat direklamasi sesuai jadwal. Memperbaiki masalah pemasangan berlebihan Pasangan Kunci Akses dan token di mesin cache JindoFSx. Memperbaiki masalah di mana mesin cache Alluxio gagal mengurai sharedOptions.
| 17 November 2023 | Tidak ada dampak pada beban kerja. |
September 2023
Versi | Deskripsi | Waktu Modifikasi | Dampak |
v1.0.4 | Memperbaiki bug terkait plugin Fluid CSI. Mendukung konfigurasi sidecar FUSE untuk memulai dalam mode non-blocking. Mendukung pembaruan dinamis untuk konfigurasi JuiceFSRuntime. Mendukung penerapan di lingkungan Kluster ACK LINGJUN.
| 18 September 2023 | Tidak ada dampak pada beban kerja. |
Agustus 2023
Versi | Deskripsi perubahan | Waktu Modifikasi | Dampak |
v1.0.3 | Menambah dukungan untuk mode pemasangan privileged sidecar FUSE. Memperbaiki masalah kehabisan memori (OOM) pada controller JuiceFSRuntime. Memperbaiki masalah terkait fitur pemulihan otomatis FUSE. Memperbaiki masalah sisa resource runtime setelah upgrade.
| 18 Agustus 2023 | Tidak ada dampak pada beban kerja. |
Juli 2023
Versi | Riwayat Perubahan | Waktu Modifikasi | Dampak |
v1.0.2 | Driver penyimpanan backend Helm (HELM_DRIVER) dialihkan ke mode ConfigMap untuk lebih membatasi izin Role-Based Access Control (RBAC) komponen control plane Fluid. Menambah dukungan bagi ThinRuntime untuk menghubungkan sistem penyimpanan pihak ketiga. ConfigMap digunakan untuk menyimpan informasi parameter. Menambah dukungan penggunaan disk lokal instans ECI sebagai media penyimpanan cache. Menambah dukungan pekerjaan prefetching cache DataLoad terjadwal.
| 18 Juli 2023 | Mengubah driver penyimpanan backend Helm dapat menyisakan beberapa resource Secret terkait Helm. Jika kluster menggunakan ThinRuntime untuk berinteraksi dengan sistem penyimpanan pihak ketiga, klien ThinRuntime yang baru dibuat mungkin gagal berjalan normal karena masalah kompatibilitas setelah ack-fluid diperbarui ke versi 1.0.2 atau lebih baru. Untuk informasi lebih lanjut, lihat Fluid.
Catatan Layanan klien ThinRuntime yang sudah berjalan tidak terpengaruh oleh upgrade komponen.
|
Juni 2023
Versi | Deskripsi | Waktu Modifikasi | Dampak |
v1.0.1 | Menambah dukungan untuk batasan penjadwalan anti-afinitas pada node ARM64. Menambah dukungan untuk mengonfigurasi upgrade CRD otomatis. Memperbaiki masalah sisa titik pemasangan HostPath dari plugin Fluid CSI.
Memperbaiki masalah kompatibilitas dengan versi Kubernetes sebelum 1.21.
| 19 Juni 2023 | Tidak ada dampak pada beban kerja. |
v1.0.0 | JuiceFSRuntime kini mendukung pekerjaan DataMigrate terjadwal. Memperbaiki masalah injeksi volume pada mode sidecar FUSE EFCRuntime. Mengoptimalkan logika pembaruan status Dataset untuk mempercepat startup Pod aplikasi. Menambah output pesan error detail saat penerapan runtime gagal.
| 7 Juni 2023 | Tidak ada dampak pada beban kerja. |
Mei 2023
Versi | Perubahan | Waktu Modifikasi | Dampak |
v0.9.10 | | 9 Mei 2023 | Tidak ada dampak pada beban kerja. |
April 2023
Versi | Perubahan | Waktu Modifikasi | Dampak |
v0.9.9 | JindoRuntime kini mendukung konfigurasi variabel lingkungan. Controller JuiceFSRuntime kini mendukung konfigurasi konkurensi controller. JuiceFSRuntime kini mendukung konfigurasi kuota subdirektori. Memperbaiki masalah penanganan path yang tidak konsisten antara DataMigrate dan DataLoad. Mengoptimalkan waktu binding PVC dan PV Fluid.
| 25 April 2023 | Tidak ada dampak pada beban kerja. |
v0.9.8 | DataMigrate kini mendukung penggunaan PVC sebagai sumber data. JindoRuntime kini mendukung pengaturan informasi gambar kontainer. Menambah dukungan untuk memasang subpath PVC dataset. Menambah dukungan untuk memantau komponen control plane Fluid.
| 18 April 2023 | Tidak ada dampak pada beban kerja. |
v0.9.7 | | 6 April 2023 | |
Maret 2023
Versi | Perubahan | Waktu Modifikasi | Dampak |
v0.9.6 | Menambah dukungan untuk migrasi data DataMigrate. DataLoad kini mendukung penjadwalan afinitas node yang dapat dikonfigurasi. Mengoptimalkan logika pemasangan Fluid CSI.
| 22 Maret 2023 | Tidak ada dampak pada beban kerja. |