E-MapReduce:JindoCache を用いた OSS-HDFS の透過キャッシュ高速化

cacheset.xml の作成

CacheSet を cacheset.xml ファイルに定義します。以下の例では、異なる OSS パスに対して 2 つの CacheSet を構成しています。

<?xml version="1.0" encoding="UTF-8"?>
<cachesets>
    <cacheset>
        <name>name1</name>
        <path>oss://emr-test/dir1</path>
        <cacheStrategy>DISTRIBUTED</cacheStrategy>
        <metaPolicy>
            <type>ALWAYS</type>
        </metaPolicy>
        <readPolicy>CACHE_ASIDE</readPolicy>
        <writePolicy>WRITE_AROUND</writePolicy>
    </cacheset>
    <cacheset>
        <name>name2</name>
        <path>oss://emr-test/dir2</path>
        <cacheStrategy>DHT</cacheStrategy>
        <metaPolicy>
            <type>ONCE</type>
        </metaPolicy>
        <readPolicy>CACHE_ASIDE</readPolicy>
        <writePolicy>WRITE_AROUND</writePolicy>
    </cacheset>
</cachesets>

各 CacheSet は親パスと一連のポリシーをマッピングします。以下の表に、すべてのパラメーターを示します。

CacheSet 構成の適用

1. ご利用のクラスターにログインします。詳細については、「クラスターへのログイン」をご参照ください。

2. cacheset.xml をクラスター上の任意のディレクトリに保存します。本例では、ファイルのパスは /path/cacheset.xml です。

3. 以下のコマンドを実行して、CacheSet 構成を JindoCache に読み込みます。

   jindocache -refreshCacheSet -path /path/cacheset.xml

   正常終了時には以下のように表示されます。

   Successfully refresh cacheset !!!

   JindoCache CLI の利用可能なすべてのコマンドについては、「JindoCache CLI 使用ガイド」をご参照ください。

4. 以下のコマンドを実行して、CacheSet が正しく読み込まれていることを確認します。

   jindocache -listCacheSet

OSS-HDFS へのクロスアカウントアクセスを構成するには？

デフォルトでは、JindoCache は明示的な認証情報を使用せずに OSS-HDFS にアクセスします（パスワードレスモード）。クロスアカウントアクセスを有効化するには、JindoCache サービスページの common タブに以下の設定項目を追加します。

構成タブを開く手順：

1. EMR コンソール にログインします。左側ナビゲーションウィンドウで、ECS 上の EMR をクリックします。

2. 上部ナビゲーションバーで、ご利用のクラスターが配置されているリージョンおよびリソースグループを選択します。

3. ECS 上の EMR ページで、対象のクラスターを見つけ、[操作] 列の サービス をクリックします。

4. JindoCache を見つけ、構成 をクリックします。

5. common タブをクリックします。

設定項目の追加：

設定項目の追加 をクリックし、以下の項目を追加します。YYY は、OSS-HDFS が有効化された OSS バケット名に置き換えてください。構成変更の適用方法については、「設定項目の管理」をご参照ください。