OSS-HDFS menggunakan Bucket Object Storage Service (OSS) untuk menyimpan data OSS-HDFS dan data pendukungnya. Data ini disimpan di direktori .dlsdata/ pada bucket. Anda akan dikenakan biaya atas kapasitas penyimpanan yang digunakan.
Blok data OSS-HDFS
Semua blok data OSS-HDFS memanfaatkan kapasitas penyimpanan Bucket OSS. Blok data OSS-HDFS merupakan bagian utama dari kapasitas penyimpanan yang digunakan. Anda dapat menjalankan perintah hdfs du untuk melihat kapasitas penyimpanan yang digunakan oleh blok data OSS-HDFS.
OSS-HDFS data checksum
OSS-HDFS mendukung fitur checksum Hadoop Distributed File System (HDFS). Data checksum tambahan dihasilkan saat data ditulis. Checksum HDFS sumber terbuka memanfaatkan kapasitas disk node data, sedangkan checksum OSS-HDFS memanfaatkan kapasitas penyimpanan Bucket OSS.
Secara default, penulisan data normal menghasilkan checksum 4 byte untuk setiap 512 byte. Saat file kecil atau blok data kecil ditulis, data checksum mungkin lebih besar, hal ini normal.
Penggunaan kapasitas penyimpanan data checksum dihitung sebagai bagian dari penggunaan kapasitas penyimpanan Bucket Standar. Anda tidak dapat menggunakan perintah hdfs du untuk menghitung atau menanyakan penggunaan kapasitas penyimpanan data checksum OSS-HDFS.
OSS-HDFS lubang file
Dalam skenario tertentu, OSS-HDFS memungkinkan Anda menimpa dan memodifikasi objek secara acak menggunakan klien JindoFuse. Blok data tidak dapat dimodifikasi. Sistem perlu menulis data atau memodifikasi objek dalam mode delta. Dalam kasus ini, lubang file yang terdiri dari nol yang tidak ditulis ke file mungkin terbentuk. Jika Anda menulis atau memodifikasi objek dalam mode file delta, kapasitas penyimpanan tambahan akan digunakan.
Penggunaan kapasitas penyimpanan lubang file dihitung sebagai bagian dari penggunaan kapasitas penyimpanan Bucket Standar. Anda tidak dapat menggunakan perintah hdfs du untuk menghitung atau menanyakan penggunaan kapasitas penyimpanan lubang file OSS-HDFS.
OSS-HDFS log audit
Operasi baca dan tulis OSS-HDFS pada objek dicatat dalam log audit. Log audit disimpan di bucket dan memanfaatkan kapasitas penyimpanan. Log audit disimpan di direktori /.sysinfo pada OSS-HDFS. Anda dapat menjalankan perintah hdfs du untuk menanyakan penggunaan kapasitas penyimpanan log audit OSS-HDFS.
OSS-HDFS daftar inventaris
OSS-HDFS mendukung ekspor daftar inventaris. Daftar inventaris disimpan di bucket dan memanfaatkan kapasitas penyimpanan. Daftar inventaris disimpan di direktori /.sysinfo pada OSS-HDFS. Anda dapat menjalankan perintah hdfs du untuk menanyakan penggunaan kapasitas penyimpanan daftar inventaris OSS-HDFS.
OSS-HDFS tempat sampah
Objek di tempat sampah OSS-HDFS tidak dihapus dari sistem OSS-HDFS sebelum periode retensi yang ditentukan berakhir dan tetap memanfaatkan kapasitas penyimpanan. Anda dapat menjalankan perintah hdfs du untuk menanyakan penggunaan kapasitas penyimpanan tempat sampah OSS-HDFS.
OSS-HDFS data internal
OSS-HDFS menggunakan Bucket OSS untuk menyimpan data sementara, seperti informasi tugas asinkron. Data sementara ini memanfaatkan kurang dari 1 GB kapasitas penyimpanan.
Data internal OSS-HDFS dihitung sebagai bagian dari penggunaan kapasitas penyimpanan Bucket Standar. Anda tidak dapat menggunakan perintah hdfs du untuk menghitung atau menanyakan penggunaan data internal OSS-HDFS.