Platform For AI:PAI でのデータセットアクセラレータの使用

前提条件

データセットアクセラレータインスタンスが作成済みであること。詳細については、「データセットアクセラレータインスタンスの作成と管理」をご参照ください。

新規データセットでのデータセットの高速化の有効化

1. データセット ページでデータセットを作成し、以下の主要なパラメーターを設定します。詳細については、「データセットの作成と管理」をご参照ください。

   パラメーター	説明
   作成方法	Alibaba Cloud プロダクトから を選択します。
   データセットの高速化の有効化	データセットの高速化の有効化 を選択します。これを選択すると、[Read/Write Properties] も設定する必要があります。 選択したデータストレージタイプに基づき、[所属インスタンス]を選択し、スロット名、最大容量、高速マウントターゲットなどのデータセット高速化スロットのパラメーターを設定します。高速マウントターゲットについては、[Select Mount Target]、[Create New Mount Target]、または [Use Internal Mount Target] を選択できます。高速化されたデータセットのデフォルトのマウントパスは /mnt/datasetacc です。詳細については、「データセット高速化スロットの作成と管理」をご参照ください。

2. コミット をクリックします。

   作成されたデータセットは [Datasets] リストに表示され、データソース、ストレージタイプ、プロパティ、可視性スコープ、最終更新日時などの詳細を確認できます。高速化が有効になっているデータセットについては、その高速化ステータスも表示されます。

既存データセットでのデータセットの高速化の有効化

1. データセット ページで、データセットの名前をクリックして、その データセットの詳細 ページを開きます。詳細については、「データセットの作成と管理」をご参照ください。

2. データセットの詳細 ページで、右上隅にある データセットの高速化 をクリックし、[所属インスタンス]を選択して、データセット高速化スロットのパラメーターを設定します。設定の詳細については、「データセット高速化スロットの作成と管理」をご参照ください。

3. コミット をクリックして、データセットの高速化を有効にします。

高速化されたデータセットの使用

DSW インスタンスを作成したり、DLC ジョブを送信したりする際に、高速化されたデータセットを使用できます。

• DSW インスタンスを作成する際、ストレージ設定 セクションで高速化が有効になっているデータセットを選択します。詳細については、「DSW インスタンスの作成と管理」をご参照ください。[Shared Dataset] エリアで、ドロップダウンリストから OSS、NAS、または CPFS タイプの高速化されたデータセットを選択し、 /mnt/data/ などのマウントパスを指定します。

• DLC ジョブを送信する際、データセットの設定 セクションで高速化が有効になっているデータセットを選択します。詳細については、「トレーニングジョブの作成」をご参照ください。[Environment Information] エリアで、設定タイプを [By dataset] に設定します。データセット入力ボックスの横にある編集アイコンをクリックしてデータセット選択ダイアログボックスを開き、[Accelerated Dataset] タブに切り替えて、マウントするターゲットデータセットを選択します。