Object Storage Service:Apsara File Storage for HDFS

適用範囲／利用シーン

Apsara File Storage for HDFS は、ビッグデータ分析や機械学習など、継続的な高スループットを要するワークロードに適しています。ECS インスタンスその他の計算リソースは、保存されたデータに直接アクセスでき、処理前にローカル記憶域へのデータコピーを行う必要はありません。Hadoop や機械学習アプリケーションを複数の計算ノードに展開し、同一のファイルシステムに対してオンラインまたはオフラインコンピューティングジョブを実行できます。また、処理結果をファイルシステムへエクスポートして永続的に保存することも可能です。

パフォーマンス

パフォーマンスの主要な評価指標はスループットです。ファイルシステムの実用可能なスループットは、接続された ECS インスタンスの最大帯域幅によって制限されます。たとえば、1.5 Gbit/s の帯域幅を持つ ECS インスタンスでは、ファイルシステムの最大スループットは 187.5 Mbit/s となります。スループットはファイルシステムの容量に比例して線形にスケールし、容量を増加させることで利用可能なスループットが直接向上します。

データ耐久性および可用性

Apsara File Storage for HDFS では、すべてのファイルについて複数のレプリカを保存します。これらのレプリカは、地理的冗長性を確保するために、異なる障害ドメインに隔離されたデバイス上に配置されます。これにより、99.999999999 %（11 個の 9）のデータ耐久性を実現しています。

セキュリティ

Apsara File Storage for HDFS では、以下の 5 つの補完的なメカニズムを用いてデータを保護します。

SDK およびコンソール

Apsara File Storage for HDFS では、以下の 2 種類の管理インターフェイスを提供します。

• SDK — Apsara File Storage for HDFS 向け Java SDK（aliyun-sdk-dfs-x.y.z.jar）は、Hadoop 互換のファイルシステム操作を実装しています。MapReduce、Hive、Spark、Flink 上で構築されたアプリケーションは、この SDK を使用することで、コードの変更や再コンパイルを行わずに、Apsara File Storage for HDFS をデフォルトのファイルシステムとして切り替えることができます。

• コンソール — Apsara File Storage for HDFS コンソールを使用すると、グラフィカルな Web インターフェイスからファイルシステムの作成および管理が可能です。

課金

Apsara File Storage for HDFS は、ファイルシステムの容量および事前に設定したスループットに基づいて課金されます。