プロジェクト内のデータ品質スキャンタスクの一覧を照会します。
操作説明
DataWorks ベーシックエディション以上をご購入いただく必要があります。
今すぐお試しください
テスト
RAM 認証
|
アクション |
アクセスレベル |
リソースタイプ |
条件キー |
依存アクション |
|
dataworks:ListDataQualityScans |
list |
*All Resource
|
なし | なし |
リクエスト構文
GET HTTP/1.1
リクエストパラメーター
|
パラメーター |
型 |
必須 / 任意 |
説明 |
例 |
| Name |
string |
任意 |
あいまい一致によるデータ品質スキャンタスク名。 |
test |
| SortBy |
string |
任意 |
ソートフィールドの一覧。最終更新時刻や作成時刻などのフィールドをサポートしています。形式:「SortField+SortOrder (Desc/Asc)」。Asc がデフォルトです。有効な値:
|
ModifyTime Desc |
| PageSize |
integer |
必須 |
1 ページあたりのエントリ数。デフォルト値:10。 |
10 |
| PageNumber |
integer |
必須 |
ページ番号。デフォルト値:1。 |
1 |
| ProjectId |
integer |
必須 |
プロジェクト ID。 |
10000 |
| Table |
string |
任意 |
監視対象テーブル名のあいまい一致。 |
video_album |
レスポンスフィールド
|
フィールド |
型 |
説明 |
例 |
|
object |
応答スキーマ |
||
| RequestId |
string |
API リクエスト ID。UUID 形式で生成されます。 |
0bc14115***159376359 |
| PageInfo |
object |
ページ情報。 |
|
| PageNumber |
integer |
ページ番号。 |
1 |
| PageSize |
integer |
1 ページあたりのレコード数。デフォルト値:10。 |
10 |
| TotalCount |
integer |
返されたレコードの総数。 |
1 |
| DataQualityScans |
array<object> |
データ品質モニターの一覧。 |
|
|
array<object> |
データ品質モニターに関する情報。 |
||
| ModifyTime |
integer |
データ品質モニターの最終更新時刻。 |
17236236472 |
| Owner |
string |
データ品質モニターの責任者となるユーザー ID。 |
23782382795249 |
| Description |
string |
データ品質スキャンタスクの説明。最大長:65,535 文字。 |
This is a hourly run data quality evaluation plan. |
| ModifyUser |
string |
データ品質モニターを最後に更新したユーザー ID。 |
23782382795249 |
| Parameters |
array<object> |
データ品質モニターの実行パラメーター定義。 |
|
|
object |
データ品質モニターの実行パラメーター定義。 |
||
| Value |
string |
パラメーター値。 |
$[yyyy-mm-dd-1] |
| Name |
string |
パラメーター名。 |
dt |
| CreateTime |
integer |
データ品質モニターの作成時刻。 |
1694512304000 |
| ProjectId |
integer |
プロジェクト ID。 |
59094 |
| CreateUser |
string |
データ品質モニターの作成者。 |
7892346529452 |
| ComputeResource |
object |
実行時に使用されるコンピュートエンジン。指定しない場合、Spec で定義されたデータソース接続が使用されます。 |
|
| Runtime |
object |
データ品質モニターの追加ランタイム設定。 |
|
| HiveConf |
string |
Hive エンジン用の追加パラメーター。現在は mapreduce.job.queuename のみがキュー設定に対応しています。 |
mapreduce.job.queuename=dq_queue |
| SparkConf |
string |
Spark エンジン用の追加パラメーター。現在は spark.yarn.queue のみがキュー設定に対応しています。 |
spark.yarn.queue=dq_queue |
| Engine |
string |
エンジンタイプ。これらの設定は EMR コンピュートエンジンでのみサポートされています。有効な値:
|
Hive |
| EnvType |
string |
コンピュートエンジンのワークスペース環境。有効な値:
|
Prod |
| Name |
string |
コンピュートエンジンの名前。エンジンを一意に識別します。 |
emr_cluster_001 |
| Name |
string |
データ品質スキャンタスクの名前。数字、英字、漢字、半角および全角の句読点を含めることができます。最大長:255 文字。 |
Hourly partition quality monitoring |
| RuntimeResource |
object |
データ品質モニターの実行時に使用されるリソースグループ。 |
|
| Cu |
number |
タスク実行時の CU 消費量。 |
0.25 |
| Id |
string |
リソースグループの ID。 |
Serverless_resource_group_xxxxx |
| Image |
string |
タスク実行用に設定されたイメージの ID。 |
i-xxxxx |
| Trigger |
object |
データ品質モニターのトリガー設定。 |
|
| Type |
string |
データ品質モニターのトリガーモード。有効な値:
|
BySchedule |
| TaskIds |
array |
トリガーモードが BySchedule の場合、モニターをトリガーするスケジューリングタスクの ID を設定する必要があります。 |
|
|
integer |
スケジューリングタスク ID。 |
1023777390 |
|
| Hooks |
array<object> |
データ品質モニター停止後のフック構成。 |
|
|
object |
データ品質モニター停止後のフック構成。 |
||
| Condition |
string |
フックのトリガー条件。この条件が満たされると、フックがトリガーされます。有効な式の形式: ルールの重大度レベルとルール検証ステータスの複数の組み合わせを指定します。例: |
results.any { r -> r.status == 'Fail' && r.rule.severity == 'Normal' || r.status == 'Error' && r.rule.severity == 'High' || r.status == 'Warn' && r.rule.severity == 'High' } |
| Type |
string |
フックのタイプ。有効な値:
|
BlockTaskInstance |
| Id |
integer |
データ品質モニターの ID。 |
26433 |
例
成功レスポンス
JSONJSON
{
"RequestId": "0bc14115***159376359",
"PageInfo": {
"PageNumber": 1,
"PageSize": 10,
"TotalCount": 1,
"DataQualityScans": [
{
"ModifyTime": 17236236472,
"Owner": "23782382795249",
"Description": "This is a hourly run data quality evaluation plan.",
"ModifyUser": "23782382795249",
"Parameters": [
{
"Value": "$[yyyy-mm-dd-1]",
"Name": "dt"
}
],
"CreateTime": 1694512304000,
"ProjectId": 59094,
"CreateUser": "7892346529452",
"ComputeResource": {
"Runtime": {
"HiveConf": "mapreduce.job.queuename=dq_queue",
"SparkConf": "spark.yarn.queue=dq_queue",
"Engine": "Hive"
},
"EnvType": "Prod",
"Name": "emr_cluster_001"
},
"Name": "Hourly partition quality monitoring",
"RuntimeResource": {
"Cu": 0.25,
"Id": "Serverless_resource_group_xxxxx",
"Image": "i-xxxxx"
},
"Trigger": {
"Type": "BySchedule",
"TaskIds": [
1023777390
]
},
"Hooks": [
{
"Condition": "results.any { r -> r.status == 'Fail' && r.rule.severity == 'Normal' || r.status == 'Error' && r.rule.severity == 'High' || r.status == 'Warn' && r.rule.severity == 'High' }",
"Type": "BlockTaskInstance"
}
],
"Id": 26433
}
]
}
}
エラーコード
完全なリストについては、「エラーコード」をご参照ください。
変更履歴
完全なリストについては、「変更履歴」をご参照ください。