SmartData は、E-MapReduce(EMR)Jindo エンジンのストレージサービスです。SmartData は、EMR コンピューティングエンジンに一元化されたストレージ、キャッシング、およびコンピューティングの最適化を提供します。このサービスは、追加機能も提供します。SmartData は、JindoFS、JindoTable、および関連ツールで構成されています。このトピックでは、SmartData 3.7.X の更新内容について説明します。
JindoFS
次の表に、JindoFS の更新内容を示します。
| 機能 | 説明 |
| 統計情報の表示 | SmartData 3.7.2 以降のバージョンでこの機能がサポートされています。 JindoFS は、オブジェクトストレージサービス(OSS)の読み取り/書き込みスループット、キャッシュの読み取り/書き込みスループット、キャッシュの使用率など、重要なメトリックに関する統計情報を収集します。 JindoFS を Prometheus に接続して、メトリックを視覚的に監視できます。 |
| データの階層型ストレージでサポートされるコールドアーカイブストレージクラス | SmartData 3.7.3 以降のバージョンでこのストレージクラスがサポートされています。 アーカイブコマンドで -c オプションを指定して、コールドアーカイブストレージにデータを保存できます。これは、コールドデータのストレージコストを削減するのに役立ちます。詳細については、「JindoFS の階層型ストレージコマンドの使用」をご参照ください。 |
JindoSDK
次の表に、JindoSDK の更新内容を示します。
| 機能 | 説明 |
| Amazon Simple Storage Service(S3)へのアクセスのサポート | JindoFS クライアントは Amazon S3 をサポートしています。 JindoFS クライアントを使用して Amazon S3 のデータにアクセスできます。 |
| OSS PrefixLink 機能 | JindoFS クライアントは OSS PrefixLink 機能をサポートしています。この機能を使用して、JindoFS の名前変更パフォーマンスを向上させることができます。これは Hive ジョブを効果的に高速化し、Hive ジョブの抽出、変換、ロード(ETL)シナリオで大きな最適化効果があります。 |
| 名前変更操作の原子性のサポート | SmartData 3.7.2 以降のバージョンでこの機能がサポートされています。 JindoFS クライアントは、x-oss-forbid-overwrite リクエストヘッダーの構成に基づいて、名前変更操作の原子性をサポートしています。これは、Delta Lake がサポートされているシナリオに適しています。 |
JindoTable
次の表に、JindoTable の更新内容を示します。
| 機能 | 説明 |
| ストレージクラスのコールドアーカイブへの変換と、コールドアーカイブストレージに保存されたデータのアーカイブ解除 | SmartData 3.7.2 以降のバージョンでこの機能がサポートされています。 JindoTable では、SDK モードでコマンドを実行して、ストレージクラスをコールドアーカイブに変換したり、コールドアーカイブストレージに保存されているデータのアーカイブを解除したりできます。詳細については、「SDK モードでのデータのアーカイブとアーカイブ解除」をご参照ください。 |