すべてのプロダクト
Search
ドキュメントセンター

E-MapReduce:SmartData 3.7.X の概要

最終更新日:Jan 11, 2025

SmartData は、E-MapReduce(EMR)Jindo エンジンのストレージサービスです。SmartData は、EMR コンピューティングエンジンに一元化されたストレージ、キャッシング、およびコンピューティングの最適化を提供します。このサービスは、追加機能も提供します。SmartData は、JindoFS、JindoTable、および関連ツールで構成されています。このトピックでは、SmartData 3.7.X の更新内容について説明します。

JindoFS

次の表に、JindoFS の更新内容を示します。

機能説明
統計情報の表示SmartData 3.7.2 以降のバージョンでこの機能がサポートされています。

JindoFS は、オブジェクトストレージサービス(OSS)の読み取り/書き込みスループット、キャッシュの読み取り/書き込みスループット、キャッシュの使用率など、重要なメトリックに関する統計情報を収集します。 JindoFS を Prometheus に接続して、メトリックを視覚的に監視できます。

データの階層型ストレージでサポートされるコールドアーカイブストレージクラスSmartData 3.7.3 以降のバージョンでこのストレージクラスがサポートされています。

アーカイブコマンドで -c オプションを指定して、コールドアーカイブストレージにデータを保存できます。これは、コールドデータのストレージコストを削減するのに役立ちます。詳細については、「JindoFS の階層型ストレージコマンドの使用」をご参照ください。

JindoSDK

次の表に、JindoSDK の更新内容を示します。

機能説明
Amazon Simple Storage Service(S3)へのアクセスのサポートJindoFS クライアントは Amazon S3 をサポートしています。 JindoFS クライアントを使用して Amazon S3 のデータにアクセスできます。
OSS PrefixLink 機能JindoFS クライアントは OSS PrefixLink 機能をサポートしています。この機能を使用して、JindoFS の名前変更パフォーマンスを向上させることができます。これは Hive ジョブを効果的に高速化し、Hive ジョブの抽出、変換、ロード(ETL)シナリオで大きな最適化効果があります。
名前変更操作の原子性のサポートSmartData 3.7.2 以降のバージョンでこの機能がサポートされています。

JindoFS クライアントは、x-oss-forbid-overwrite リクエストヘッダーの構成に基づいて、名前変更操作の原子性をサポートしています。これは、Delta Lake がサポートされているシナリオに適しています。

JindoTable

次の表に、JindoTable の更新内容を示します。

機能説明
ストレージクラスのコールドアーカイブへの変換と、コールドアーカイブストレージに保存されたデータのアーカイブ解除SmartData 3.7.2 以降のバージョンでこの機能がサポートされています。

JindoTable では、SDK モードでコマンドを実行して、ストレージクラスをコールドアーカイブに変換したり、コールドアーカイブストレージに保存されているデータのアーカイブを解除したりできます。詳細については、「SDK モードでのデータのアーカイブとアーカイブ解除」をご参照ください。