CPFS インテリジェントエディションデータフローの管理 - Cloud Parallel File Storage

CPFS インテリジェントエディションファイルシステムと OSS バケット間のデータフローを実装する前に、対応するデータフローが作成されていることを確認してください。このトピックでは、ファイルストレージコンソールで CPFS インテリジェントエディションデータフローを作成および管理する方法について説明します。

前提条件

ソース OSS バケットがタグ付けされています (キー: cpfs-dataflow、値: true)。データフローの使用中は、このタグを削除または変更しないでください。削除または変更すると、CPFS インテリジェントエディションファイルシステムデータフローはバケットデータにアクセスできなくなります。詳細については、「OSS バケットのタグ付け」をご参照ください。
複数のデータフローが同じ OSS バケットにデータをエクスポートする際のデータの競合を防ぐために、OSS バケットでバージョン管理を有効にする必要があります。詳細については、「バージョン管理の概要」をご参照ください。

制限事項

凌雲 (Lingjun) V2.4.0 以降の CPFS は、同一アカウント内のデータフローをサポートしています。凌雲 (Lingjun) V2.6.0 以降の CPFS は、アカウントを跨いでのデータフローをサポートしています。
凌雲 (Lingjun) ファイルシステム用の CPFS に対して、最大 10 個のデータフローを作成できます。
凌雲 (Lingjun) ファイルシステム用の CPFS 内のファイルパスは、1 つの OSS バケットにのみ関連付けることができます。
別のリージョンにある凌雲 (Lingjun) ファイルシステム用の CPFS と OSS バケットの間でデータフローを作成することはできません。

詳細については、「凌雲 (Lingjun) 用 CPFS データフロー (招待プレビュー)」の「制限事項」セクションをご参照ください。

同一アカウント内でデータフローを作成する

NAS コンソールにログインします。
左側のナビゲーションウィンドウで、ファイルシステムファイルシステムリスト を選択します。
上部のナビゲーションバーで、リージョンを選択します。
ファイルシステムリスト ページで、ファイルシステムの名前をクリックします。
ファイルシステムの製品ページで、Dataflow をクリックします。
Dataflow タブで、Create Dataflow をクリックします。

Create Dataflow ダイアログボックスで、次のパラメーターを構成します。

パラメーター	説明
CPFS ファイルシステムパス	OSS とのデータフローのパスを指定します。制限: 長さは 1 ～ 1023 文字 (英語) です。スラッシュ (/) で開始および終了する必要があります。
OSS バケット	ソース OSS バケットを CPFS インテリジェントエディションファイルシステムパスに関連付けます。 [現在のアカウントのバケットを選択] を選択し、ドロップダウンリストからターゲット OSS バケットの名前を選択します。
OSS オブジェクトプレフィックス	ソース OSS バケットのパス。制限: 長さは 1 ～ 1023 文字 (英語) です。スラッシュ (/) で開始および終了する必要があります。 OSS バケット内の既存のプレフィックスである必要があります。
OSS バケット SSL	OSS へのアクセスに HTTPS を使用するかどうかを選択します。
SLR 権限付与	[データフローの作成] を初めて行う場合は、CPFS が Object Storage Service (OSS) サービスリソースのサービスロールにアクセスすることを承認することに同意する必要があります。詳細については、「Cloud Parallel File Storage サービスロール」をご参照ください。

OK をクリックします。
[確認] をクリックすると、システムが入力情報の正しさを検証します。通常、これには 1 ～ 2 分かかります。検証後、ウィンドウは自動的に閉じます。ウィンドウを手動で閉じないでください。

アカウントを跨いでのデータフローを作成する

アカウント B のソース OSS バケットからアカウント A の CPFS インテリジェントエディションファイルシステムにデータをフローする必要がある場合は、まずバケットが配置されているアカウントにログインして AliyunNasCrossAccountDataFlowDefaultRole ロールの権限付与を実行し、CPFS インテリジェントエディションファイルシステムが配置されているアカウントの UID をロールの権限に追加する必要があります。次に、アカウント A にログインして、アカウントを跨いでのデータフローとデータのインポート/エクスポートタスクなどを作成します。

このトピックでは、Alibaba Cloud アカウント A の CPFS インテリジェントエディションファイルシステムとアカウント B の OSS バケット間のデータフローを例として、プロセスを紹介します。

手順

ソース OSS バケットが配置されているアカウントを承認します。
1. アカウント B を使用して NAS コンソールにログインします。
2. [概要] ページの [共通エントリ] 領域で、[権限管理] をクリックします。
3. [権限管理] パネルの [アカウントを跨いでのデータフローの権限付与] 領域で、[権限付与に進む] をクリックします。
4. [承認に同意する] をクリックします。
5. NAS コンソールの [認証管理] パネルに戻り、[アカウント横断データフロー認証] エリアで [詳細の表示] をクリックして、[aliyunnascrossaccountdataflowdefaultrole] ロールの詳細ページに移動します。
6. [信頼ポリシー] タブで、[信頼ポリシーの編集] をクリックします。
7. Service フィールドを Alibaba Cloud アカウント@nas.aliyuncs.com の形式に変更します。
  たとえば、Alibaba Cloud アカウント A が 178321033379**** の場合、Service を nas.aliyuncs.com から 178321033379****@nas.aliyuncs.com に変更する必要があります。これは、この XX ロールが Alibaba Cloud アカウント A 178321033379****@nas.aliyuncs.com のデータフローサービスによって偽装できることを示しています。
```
{
  "Statement": [
    {
      "Action": "sts:AssumeRole",
      "Effect": "Allow",
      "Principal": {
        "Service": [
          "178321033379****@nas.aliyuncs.com" // アカウントAのIDに変更
        ]
      }
    }
  ],
  "Version": "1"
}
```

アカウントを跨いでのデータフローを作成します。

アカウント A を使用して NAS コンソールにログインします。
左側のナビゲーションウィンドウで、ファイルシステムファイルシステムリスト を選択します。
上部のナビゲーションバーで、リージョンを選択します。
ファイルシステムリスト ページで、ファイルシステムの名前をクリックします。
ファイルシステムの製品ページで、Dataflow をクリックします。
Dataflow タブで、Create Dataflow をクリックします。

Create Dataflow ダイアログボックスで、次のパラメーターを構成します。

パラメーター	説明
CPFS ファイルシステムパス	OSS とのデータフローのパスを指定します。制限: 長さは 1 ～ 1023 文字 (英語) です。スラッシュ (/) で開始および終了する必要があります。
OSS バケット	ソース OSS バケットを CPFS インテリジェントエディションファイルシステムパスに関連付けます。 [別のアカウントのバケットを指定] を選択し、[アカウント ID] ボックスにソース OSS バケットが配置されているアカウントの UID を入力し、[バケット名] ボックスにターゲットソース OSS バケットの名前を入力します。
OSS オブジェクトプレフィックス	ソース OSS バケットのパス。制限: 長さは 1 ～ 1023 文字 (英語) です。スラッシュ (/) で開始および終了する必要があります。 OSS バケット内の既存のプレフィックスである必要があります。
OSS バケット SSL	OSS へのアクセスに HTTPS を使用するかどうかを選択します。

[確認] をクリックします。
[確認] をクリックすると、システムが入力情報の正しさを検証します。通常、これには 1 ～ 2 分かかります。検証後、ウィンドウは自動的に閉じます。ウィンドウを手動で閉じないでください。

次のステップ

データフローを正常に作成した後、必要に応じてエクスポートタスクまたはインポートタスクを作成して、CFPFS インテリジェントエディションファイルシステムと OSS バケット間のデータフローを実現する必要があります。具体的な操作については、「タスクの作成」をご参照ください。

操作	説明	手順
データフローの表示	作成されたデータフローを表示し、指定されたデータフローでデータフロートスクを作成できます。	Dataflow タブで、指定されたデータフローの構成情報をクエリできます。
データフローの変更	データフローの説明のみを変更できます。	Dataflow タブで、ターゲットデータフローを見つけます。変更をクリックして、指定されたデータフローの説明情報を変更します。 OK をクリックします。
データフローの削除	データフローを削除すると、指定されたデータフローのすべてのタスクが消去され、データは同期されなくなります。重要実行中のストリームタスクまたはバッチタスクが進行中の場合、データフローを削除することはできません。	Dataflow タブで、ターゲットデータフローを見つけます。 Delete をクリックして、ターゲットデータフローを確認します。 [確認] をクリックします。

Cloud Parallel File Storage:データフローの管理

前提条件

制限事項

同一アカウント内でデータフローを作成する

アカウントを跨いでのデータフローを作成する

手順

関連操作

次のステップ