全部产品
Search
文档中心

E-MapReduce:Kebijakan manajemen data

更新时间:Jul 02, 2025

JindoFS dalam mode penyimpanan blok menyediakan kebijakan manajemen data tingkat lanjut untuk memenuhi berbagai kebutuhan penyimpanan. Kebijakan ini mencakup kebijakan penyimpanan dan kebijakan kompresi. Topik ini menjelaskan secara rinci kebijakan-kebijakan tersebut serta memberikan contoh penggunaannya.

Kebijakan penyimpanan

JindoFS menyediakan lima kebijakan penyimpanan yang dijelaskan dalam tabel berikut untuk mendukung fleksibilitas penyimpanan.
KebijakanDeskripsi
ARData hanya memiliki satu cadangan. Cadangan disimpan sebagai objek Arsip di OSS.
IAData hanya memiliki satu cadangan. Cadangan disimpan sebagai objek Akses Jarang (IA) di OSS.
COLDData hanya memiliki satu cadangan. Cadangan disimpan sebagai objek Standar di OSS.
WARMData memiliki satu cadangan di OSS dan satu cadangan lokal. Cadangan lokal dapat secara efektif mempercepat operasi pembacaan data.

Secara default, kebijakan penyimpanan ini digunakan.

HOTData memiliki satu cadangan di OSS dan satu cadangan lokal. Cadangan lokal dikunci secara paksa. Dengan cara ini, cadangan tidak dihapus saat cache dibersihkan secara otomatis. Kebijakan ini dapat mencapai efek percepatan yang lebih baik daripada kebijakan WARM dan cocok untuk data terpanas.

Untuk informasi lebih lanjut tentang kelas penyimpanan OSS, lihat Kelas Penyimpanan.

File baru disimpan berdasarkan kebijakan penyimpanan yang ditentukan untuk direktori induknya. Contoh:
  • Jalankan perintah berikut untuk mengonfigurasi kebijakan penyimpanan:
    jindo jfs -setStoragePolicy [-R] <StoragePolicy>(AR/IA/COLD/WARM/HOT) <path> ...
    di mana:
    • [-R]: menentukan bahwa operasi rekursif dilakukan untuk mengonfigurasi kebijakan penyimpanan yang sama untuk semua sub-direktori dari direktori.
    • <path>: nama direktori yang kebijakan penyimpanannya dikonfigurasi.
  • Jalankan perintah berikut untuk mendapatkan kebijakan penyimpanan yang dikonfigurasi untuk sebuah direktori:
    jindo jfs -getStoragePolicy <path>

Kebijakan kompresi

JindoFS memungkinkan Anda menekan blok data sebelum menyimpannya. Fitur ini secara efektif mengurangi ruang penyimpanan yang digunakan oleh blok data dan meningkatkan efisiensi pembacaan serta penulisan data. Fitur ini cocok untuk file dengan rasio kompresi tinggi. Tabel berikut menjelaskan kebijakan kompresi yang didukung.
KebijakanDeskripsi
NONEBlok data tidak dikompresi.

Secara default, kebijakan kompresi ini digunakan.

ZSTDAlgoritma kompresi Zstandard digunakan untuk menekan blok data.
File baru dikompresi berdasarkan kebijakan kompresi yang ditentukan untuk direktori induknya sebelum disimpan. Contoh:
  • Jalankan perintah berikut untuk mengonfigurasi kebijakan kompresi:
    jindo jfs -setCompressionPolicy [-R] <CompressionPolicy>(NONE/ZSTD) <path> ...
    di mana:
    • [-R]: menentukan bahwa operasi rekursif dilakukan untuk mengonfigurasi kebijakan kompresi yang sama untuk semua sub-direktori dari direktori.
    • <path>: nama direktori yang kebijakan kompresinya dikonfigurasi.
  • Jalankan perintah berikut untuk mendapatkan kebijakan kompresi yang dikonfigurasi untuk sebuah direktori:
    jindo jfs -getCompressionPolicy <path> ...