SmartData adalah layanan penyimpanan untuk mesin Jindo E-MapReduce (EMR). Layanan ini menyediakan penyimpanan terpusat, caching, dan optimasi komputasi untuk EMR, serta fitur tambahan. SmartData mencakup JindoFS, JindoTable, dan alat terkait. Topik ini menjelaskan pembaruan pada SmartData 3.6.X.
JindoFS
Tabel berikut menggambarkan pembaruan pada JindoFS.
| Fitur | Deskripsi |
| Akses lintas-cloud ke Amazon Simple Storage Service (S3) dan layanan lain yang menggunakan protokol S3, serta percepatan berbasis cache untuk akses ke layanan tersebut | JindoFS mendukung protokol S3 dan dapat mengakses Amazon S3 serta sistem lain yang menggunakan protokol S3. Fitur percepatan berbasis cache mempercepat akses ke sistem-sistem tersebut. |
| Percepatan berbasis cache untuk akses ke HDFS | Fitur percepatan berbasis cache digunakan untuk mempercepat akses ke HDFS. |
| Opsi pemuatan transaksional MetaSync dan Data Cache | Dua opsi pemuatan transaksional, MetaSync dan Data Cache, ditambahkan ke JindoFS. Ini memastikan properti transaksional tugas pra-pemuatan dan mencegah status perantara ditampilkan dalam Tampilan metadata selama proses pemuatan. |
| Optimasi mekanisme pra-pemuatan cache |
|
JindoSDK
Tabel berikut menggambarkan pembaruan pada JindoSDK.
| Fitur | Deskripsi |
| Caching lokal | JindoSDK memungkinkan Anda mengonfigurasi kebijakan caching lokal, yang memungkinkan caching data lokal bahkan jika layanan SmartData tidak diterapkan. Ini mempercepat akses ke data Object Storage Service (OSS). |
| API Object Store setara dengan API FileSystem | API Object Store ditambahkan ke JindoSDK. API ini setara dengan API FileSystem yang sudah ada. API Object Store lebih cocok untuk sistem penyimpanan seperti OSS dan mempermudah akses ke sistem-sistem tersebut. API Object Store juga meningkatkan efisiensi operasi salin dan ubah nama. |
| Optimasi caching sisi server OSS | Akselerator akses OSS disediakan. Setelah Anda mengaktifkan akselerator, Anda dapat menyesuaikan bandwidth untuk mengakses data OSS berdasarkan kapasitas akselerator. |
| Domain tingkat kedua OSS | Akses ke OSS menggunakan domain tingkat kedua didukung. Setelah Anda mengaktifkan fitur ini, Anda dapat menggunakan domain tingkat kedua atau alamat IP untuk mengakses OSS di beberapa lingkungan khusus. Fitur ini dinonaktifkan secara default. |
JindoTable
Tabel berikut menggambarkan pembaruan pada JindoTable.
| Fitur | Deskripsi |
| Penyimpanan bertingkat dan pengarsipan data HDFS di OSS | Perintah MoveTo digunakan untuk memigrasikan data dari beberapa tabel atau partisi ke OSS sekaligus. Perintah ini secara otomatis memperbarui metadata. Anda dapat menentukan kondisi filter untuk menyaring partisi dan mengonfigurasi kebijakan penyimpanan untuk migrasi data ke OSS. Sejumlah besar data yang sudah ada di OSS dapat diarsipkan sekaligus. |
| Pembukaan arsip dan pengambilan data di OSS | Perintah unarchiveTable digunakan untuk membuka arsip dan mengambil sejumlah besar data yang diarsipkan di OSS. |
| Percepatan kecepatan query Presto terhadap file dalam format Parquet | Mesin asli yang disediakan oleh JindoTable mempercepat kecepatan query Presto terhadap file dalam format Parquet. |
| Percepatan kecepatan query Spark 3 terhadap file dalam format Parquet atau ORC | Mesin asli yang disediakan oleh JindoTable mempercepat kecepatan query Spark 3 terhadap file dalam format Parquet atau ORC. |
| Percepatan kecepatan query Spark atau Presto terhadap data di HDFS | Mesin asli yang disediakan oleh JindoTable mempercepat kecepatan query Spark atau Presto terhadap data di HDFS. |
| Analisis log akses OSS | Pernyataan SQL dapat dieksekusi untuk menganalisis log akses OSS. |
JindoFuse
Tabel berikut menggambarkan pembaruan pada JindoFuse.
| Fitur | Deskripsi |
| Skenario pelatihan dan pemasangan online | Anda dapat memasang sistem file ke namespace JindoFS tertentu atau direktori OSS. Anda dapat menentukan direktori OSS dalam mode SDK. |