データセットデータ構造 - PAI - Alibaba Cloud - - Alibaba Cloud ドキュメントセンター

パラメーター	タイプ	説明	例
	object	データセットのプロパティ。
DatasetId	string	データセットの ID。	d-c0h44g3****j8o4348
UserId	string	ユーザー ID。	2485765****023475
OwnerId	string	Alibaba Cloud アカウントの ID。	1631044****3440
Name	string	データセットの名前。	myName
DataSourceType	string	データソースのタイプ。	NAS
Uri	string	URI の例： OSS データソース： `oss://bucket.endpoint/object` 汎用 NAS データソース： `nas://<nasfisid>.region/subpath/to/dir/` CPFS 1.0 データソース： `nas://<cpfs-fsid>.region/subpath/to/dir/` CPFS 2.0 データソース： `nas://<cpfs-fsid>.region/<protocolserviceid>/` 説明 `fsid` のフォーマットによって CPFS 1.0 と CPFS 2.0 が区別されます。CPFS 1.0 の `fsid` は `cpfs-<8 文字の ASCII 文字列>` というフォーマットで、CPFS 2.0 の `fsid` は `cpfs-<16 文字の ASCII 文字列>` というフォーマットです。	nas://09f****f2.cn-hangzhou/
GmtCreateTime	string	作成時間。	2021-01-21T17:12:35.232Z
GmtModifiedTime	string	更新時間。	2021-01-21T17:12:35.232Z
DataType	string	データセットのデータの型。有効な値： `COMMON`：(デフォルト) 一般データ。 `PIC`：画像。 `TEXT`：テキスト。 `VIDEO`：動画。 `AUDIO`：オーディオ。	COMMON
Property	string	データセットが単一のファイルかディレクトリかを示します。有効な値： `FILE`：データセットはファイルです。 `DIRECTORY`：データセットはディレクトリです。	DIRECTORY
SourceType	string	ソースタイプ。	USER
SourceId	string	ソース ID。	jdnhf***fnrimv
Description	string	データセットの説明。	This is a description of a dataset.
WorkspaceId	string	データセットが配置されているワークスペースの ID。	478**
Options	string	拡張オプションの JSON 文字列。Data Lake Compute ジョブでデータセットを使用する場合、`mountPath` フィールドを設定して、データセットのデフォルトのマウントパスを指定できます。	{ "mountPath": "/mnt/data/" }
Accessibility	string	ワークスペース内でのデータセットの可視性。有効な値： `PRIVATE`：データセットの所有者と管理者のみに表示されます。 `PUBLIC`：データセットはワークスペース内のすべてのユーザーに表示されます。 `ROLE_PUBLIC`：指定されたワークスペースロールに表示されます (`AccessibleRoleIdList` をご参照ください)。所有者と管理者にも表示されます。	PRIVATE
ProviderType	string	データソースプロバイダーのタイプ。有効な値： `ECS` (デフォルト) `Lingjun`	Ecs
SourceDatasetId	string	アノテーション付きデータセットのソースデータセットの ID。	d-bvfasdfxxxxj8o411
SourceDatasetVersion	string	アノテーション付きデータセットのソースデータセットのバージョン。	v2
TagTemplateType	string	iTAG アノテーション付きデータセットのアノテーションテンプレート。	text-classification
LatestVersion	DatasetVersion	最新のデータセットバージョンの詳細。
MountAccess	string	マウントアクセス権限。	RO RW
ImportInfo	string	ストレージソースからデータをインポートするための設定。サポートされているソースには、OSS、NAS、CPFS が含まれます。 OSS { "region": "${region}",// リージョン ID。 "bucket": "${bucket}",// バケット名。 "path": "${path}" // ファイルパス。 } NAS CPFS Content Intelligent Computing CPFS Content	{ "region": "cn-wulanchabu", "fileSystemId": "bmcpfs-xxxxxxxxxxx", "path": "/mnt", "mountTarget": "cpfs-xxxxxxxxxxxx-vpc-gacs9f.cn-wulanchabu.cpfs.aliyuncs.com", "isVpcMount": true }
Edition	string	データセットのエディション。有効な値： `BASIC`：ベーシックエディション。このエディションはファイルメタデータ管理をサポートしていません。 `ADVANCED`：アドバンストエディション。このエディションは OSS データセットでのみサポートされており、バージョンごとに最大 100 万ファイルのメタデータ管理が可能です。	BASIC
IsShared	boolean	データセットが共有されているかどうかを示します。	false
SharedFrom	DatasetShareRelationship	共有データセットのソース。このパラメーターは、`IsShared` が `true` の場合にのみ有効です。
SharingConfig	object	データセットの共有設定。
SharedTo	array	共有関係のリスト。
	DatasetShareRelationship	データセットの共有方法を定義する共有関係。
Labels	array	ラベルのリスト。
	Label	ラベル。	{"Key": "env", "Value": "test"}
MountAccessReadWriteRoleIdList	array	データセットに対する読み取りおよび書き込み権限を持つワークスペースロールの ID のリスト。`PAI` で始まるロール ID は組み込みロールであり、`role-` で始まるロール ID はカスタムロールです。アスタリスク (`*`) は、すべてのロールが読み取りおよび書き込み権限を持つことを示します。
	string	ワークスペースロールの ID。	PAI.AlgoOperator
AccessibleRoleIdList	array	`Accessibility` が `ROLE_PUBLIC` の場合、このパラメーターにはデータセットを表示できるワークスペースロールの ID がリストされます。`PAI` で始まるロール ID は組み込みロールであり、`role-` で始まるロール ID はカスタムロールです。
	string	ワークスペースロールの ID。

object

データセットのプロパティ。

DatasetId

string

データセットの ID。

d-c0h44g3****j8o4348

UserId

string

ユーザー ID。

2485765****023475

OwnerId

string

Alibaba Cloud アカウントの ID。

1631044****3440

Name

string

データセットの名前。

myName

DataSourceType

string

データソースのタイプ。

NAS

Uri

string

URI の例：

OSS データソース： oss://bucket.endpoint/object
汎用 NAS データソース： nas://<nasfisid>.region/subpath/to/dir/
CPFS 1.0 データソース： nas://<cpfs-fsid>.region/subpath/to/dir/
CPFS 2.0 データソース： nas://<cpfs-fsid>.region/<protocolserviceid>/

説明

fsid のフォーマットによって CPFS 1.0 と CPFS 2.0 が区別されます。CPFS 1.0 の fsid は cpfs-<8 文字の ASCII 文字列> というフォーマットで、CPFS 2.0 の fsid は cpfs-<16 文字の ASCII 文字列> というフォーマットです。

nas://09f****f2.cn-hangzhou/

GmtCreateTime

string

作成時間。

2021-01-21T17:12:35.232Z

GmtModifiedTime

string

更新時間。

2021-01-21T17:12:35.232Z

DataType

string

データセットのデータの型。有効な値：

COMMON：(デフォルト) 一般データ。
PIC：画像。
TEXT：テキスト。
VIDEO：動画。
AUDIO：オーディオ。

COMMON

Property

string

データセットが単一のファイルかディレクトリかを示します。有効な値：

FILE：データセットはファイルです。
DIRECTORY：データセットはディレクトリです。

DIRECTORY

SourceType

string

ソースタイプ。

USER

SourceId

string

ソース ID。

jdnhf***fnrimv

Description

string

データセットの説明。

This is a description of a dataset.

WorkspaceId

string

データセットが配置されているワークスペースの ID。

478**

Options

string

拡張オプションの JSON 文字列。Data Lake Compute ジョブでデータセットを使用する場合、mountPath フィールドを設定して、データセットのデフォルトのマウントパスを指定できます。

{ "mountPath": "/mnt/data/" }

Accessibility

string

ワークスペース内でのデータセットの可視性。有効な値：

PRIVATE：データセットの所有者と管理者のみに表示されます。
PUBLIC：データセットはワークスペース内のすべてのユーザーに表示されます。
ROLE_PUBLIC：指定されたワークスペースロールに表示されます (AccessibleRoleIdList をご参照ください)。所有者と管理者にも表示されます。

PRIVATE

ProviderType

string

データソースプロバイダーのタイプ。有効な値：

ECS (デフォルト)
Lingjun

Ecs

SourceDatasetId

string

アノテーション付きデータセットのソースデータセットの ID。

d-bvfasdfxxxxj8o411

SourceDatasetVersion

string

アノテーション付きデータセットのソースデータセットのバージョン。

v2

TagTemplateType

string

iTAG アノテーション付きデータセットのアノテーションテンプレート。

text-classification

LatestVersion

DatasetVersion

最新のデータセットバージョンの詳細。

MountAccess

string

マウントアクセス権限。

RO RW

ImportInfo

string

ストレージソースからデータをインポートするための設定。サポートされているソースには、OSS、NAS、CPFS が含まれます。

OSS

{ "region": "${region}",// リージョン ID。 "bucket": "${bucket}",// バケット名。 "path": "${path}" // ファイルパス。 }

NAS

CPFS

Content

Intelligent Computing CPFS

Content

{ "region": "cn-wulanchabu", "fileSystemId": "bmcpfs-xxxxxxxxxxx", "path": "/mnt", "mountTarget": "cpfs-xxxxxxxxxxxx-vpc-gacs9f.cn-wulanchabu.cpfs.aliyuncs.com", "isVpcMount": true }

Edition

string

データセットのエディション。有効な値：

BASIC：ベーシックエディション。このエディションはファイルメタデータ管理をサポートしていません。 ADVANCED：アドバンストエディション。このエディションは OSS データセットでのみサポートされており、バージョンごとに最大 100 万ファイルのメタデータ管理が可能です。

BASIC

IsShared

boolean

データセットが共有されているかどうかを示します。

false

SharedFrom

DatasetShareRelationship

共有データセットのソース。このパラメーターは、IsShared が true の場合にのみ有効です。

SharingConfig

object

データセットの共有設定。

SharedTo

array

共有関係のリスト。

DatasetShareRelationship

データセットの共有方法を定義する共有関係。

Labels

array

ラベルのリスト。

Label

ラベル。

{"Key": "env", "Value": "test"}

MountAccessReadWriteRoleIdList

array

データセットに対する読み取りおよび書き込み権限を持つワークスペースロールの ID のリスト。PAI で始まるロール ID は組み込みロールであり、role- で始まるロール ID はカスタムロールです。アスタリスク (*) は、すべてのロールが読み取りおよび書き込み権限を持つことを示します。

string

ワークスペースロールの ID。

PAI.AlgoOperator

AccessibleRoleIdList

array

Accessibility が ROLE_PUBLIC の場合、このパラメーターにはデータセットを表示できるワークスペースロールの ID がリストされます。PAI で始まるロール ID は組み込みロールであり、role- で始まるロール ID はカスタムロールです。

string

ワークスペースロールの ID。