Platform for AI (PAI) でデータセットを作成する際に、データセットアクセラレーションを有効にできます。その後、Data Science Workshop (DSW) インスタンスの作成時や Deep Learning Containers (DLC) ジョブの送信時に高速化されたデータセットを使用すると、データの読み取りパフォーマンスが向上します。このトピックでは、PAI でデータセットアクセラレータを使用する方法について説明します。
前提条件
データセットアクセラレータを作成済みであること。 詳細については、「データセットアクセラレータの作成と管理」をご参照ください。
新しいデータセットの高速化
Datasets ページで、データセットを作成し、次のキーパラメーターを設定します。 詳細については、「データセットの作成と管理」をご参照ください。
パラメーター
説明
Create Dataset
From Alibaba Cloud を選択します。
Enable Dataset Acceleration
Enable Dataset Acceleration を選択し、関連するパラメーターを設定します。
選択したデータストレージタイプに基づいて、Dataset Acceleratorを選択し、スロット名、最大容量、高速化されたマウントポイントなどのスロットパラメーターを設定します。詳細については、「スロットを作成および管理する」をご参照ください。
Submit をクリックします。
新しいデータセットがデータセットリストに表示されます。 次の図は、高速化されたデータセットを示しています。
既存のデータセットの高速化
Datasets ページで、目的のデータセット名をクリックすると、Dataset Details ページが開きます。詳細については、「データセットの作成と管理」をご参照ください。
Dataset Details ページの右上隅で、Dataset Acceleration をクリックします。Dataset Accelerator を選択し、スロットパラメーターを設定します。詳細については、「スロットの作成と管理」をご参照ください。
Submitをクリックして、データセットの加速を有効にします。
高速化されたデータセットの使用
DSW インスタンスを作成するか、DLC ジョブを送信する際に、高速化されたデータセットを使用できます。
DSW インスタンスを作成する際、Storage Configurations セクションで高速化されたデータセットを選択します。詳細については、「DSW インスタンスの作成と管理」をご参照ください。
DLC job を送信するときは、Dataset Configuration セクションで高速化されたデータセットを選択します。 詳細については、「トレーニングジョブを作成する」をご参照ください。
