データ品質ルールの詳細をクエリします。
この API は廃止されました。一時的にアクセス可能ですが、更新やバグ修正対応は一切行われません。代わりに dataworks-public(2024-05-18) - GetDataQualityScan への移行を推奨します。より強化された機能に加え、サポートも引き続きご利用いただけます。
操作説明
この機能を使用するには、DataWorks Basic Edition 以上の購入が必要です。
今すぐお試しください
テスト
RAM 認証
|
アクション |
アクセスレベル |
リソースタイプ |
条件キー |
依存アクション |
|
dataworks:* |
get |
*すべてのリソース。
|
なし | なし |
リクエストパラメーター
|
パラメーター |
型 |
必須 / 任意 |
説明 |
例 |
| Id |
integer |
必須 |
ルール ID。 |
19715 |
レスポンスフィールド
|
フィールド |
型 |
説明 |
例 |
|
object |
返却データ。 |
||
| RequestId |
string |
リクエスト ID。 |
691CA452-D37A-4ED0-**** |
| DataQualityRule |
object |
ルールの詳細。 |
|
| Id |
integer |
ルール ID。 |
16033 |
| Name |
string |
ルールの名前。 |
The table cannot be empty. |
| ProjectId |
integer |
DataWorks ワークスペース ID。 |
1948 |
| Enabled |
boolean |
ルールが有効かどうかを示します。 |
true |
| Severity |
string |
業務上のルールの重要度 (ページの「強いルール」/「弱いルール」に対応します)。 有効な値:
|
High |
| Description |
string |
ルールの説明。最大長は 500 文字です。 |
this is a odps _sql task |
| Target |
object |
ルールが監視する対象。 |
|
| Type |
string |
監視対象のタイプ。
|
Table |
| DatabaseType |
string |
Table タイプのデータセットの場合、テーブルが属するデータベースのタイプ。
|
maxcompute |
| TableGuid |
string |
データマップ内でルールが適用されるテーブルの一意な ID。 |
odps.unit_test.tb_unit_test |
| PartitionSpec |
string |
パーティションテーブルのパーティション設定。 |
ds=$[yyyymmdd-1] |
| TemplateCode |
string |
ルールが参照するルールテンプレートの一意な識別子。 |
SYSTEM:table:table_count:fixed |
| SamplingConfig |
object |
サンプル収集に必要な設定。 |
|
| Metric |
string |
サンプリングメトリック:
|
Max |
| MetricParameters |
string |
サンプル収集に必要なパラメーター。 |
{ "Columns": [ "id", "name" ] , "SQL": "select count(1) from table;"} |
| SettingConfig |
string |
サンプリングステートメントの実行前に挿入・実行されるランタイムパラメーター設定ステートメント。最大長は 1,000 文字です。現在、MaxCompute のみがサポートされています。 |
SET odps.sql.udf.timeout=600s; SET odps.sql.python.version=cp27; |
| SamplingFilter |
string |
サンプリング時に、対象外のデータをさらにフィルタリングするための条件。最大長は 16,777,215 文字です。 |
id IS NULL |
| CheckingConfig |
object |
サンプルのチェック設定。 |
|
| Type |
string |
しきい値の計算方法:
|
Fixed |
| ReferencedSamplesFilter |
string |
一部のタイプのしきい値では、参照サンプルをクエリし、その値を集約して比較用のしきい値を導出する必要があります。この式で、参照サンプルをクエリする方法を示します。 |
{ "bizdate": [ "-1", "-7", "-1m" ] } |
| Thresholds |
object |
しきい値の設定。 |
|
| Expected |
object |
期待されるしきい値の設定。 |
|
| Operator |
string |
比較演算子:
|
> |
| Value |
string |
しきい値。 |
100.0 |
| Expression |
string |
しきい値の式。 |
$checkValue <= 0.01 |
| Warned |
object |
通常の警告のしきい値設定。 |
|
| Operator |
string |
比較演算子:
|
> |
| Value |
string |
しきい値。 |
100.0 |
| Expression |
string |
しきい値の式。 |
$checkValue > 0.01 |
| Critical |
object |
重大な警告のしきい値設定。 |
|
| Operator |
string |
比較演算子:
|
> |
| Value |
string |
しきい値。 |
100.0 |
| Expression |
string |
しきい値の式。 |
$checkValue > 0.05 |
| ErrorHandlers |
array<object> |
品質ルールチェックの問題ハンドラーのリスト。 |
|
|
object |
品質ルールチェックの問題ハンドラー。 |
||
| Type |
string |
ハンドラータイプ:
|
SaveErrorData |
| ErrorDataFilter |
string |
ルールがカスタム SQL ルールの場合、問題データをフィルタリングするための SQL ステートメントを指定する必要があります。 |
SELECT * FROM tb_api_log WHERE id IS NULL |
例
成功レスポンス
JSONJSON
{
"RequestId": "691CA452-D37A-4ED0-****",
"DataQualityRule": {
"Id": 16033,
"Name": "The table cannot be empty.\n",
"ProjectId": 1948,
"Enabled": true,
"Severity": "High",
"Description": "this is a odps _sql task\n",
"Target": {
"Type": "Table",
"DatabaseType": "maxcompute",
"TableGuid": "odps.unit_test.tb_unit_test\n",
"PartitionSpec": "ds=$[yyyymmdd-1]\n"
},
"TemplateCode": "SYSTEM:table:table_count:fixed",
"SamplingConfig": {
"Metric": "Max",
"MetricParameters": "{ \"Columns\": [ \"id\", \"name\" ] , \"SQL\": \"select count(1) from table;\"}",
"SettingConfig": "SET odps.sql.udf.timeout=600s; \nSET odps.sql.python.version=cp27;\n",
"SamplingFilter": "id IS NULL\n"
},
"CheckingConfig": {
"Type": "Fixed",
"ReferencedSamplesFilter": "{ \"bizdate\": [ \"-1\", \"-7\", \"-1m\" ] }\n",
"Thresholds": {
"Expected": {
"Operator": ">",
"Value": "100.0",
"Expression": "$checkValue <= 0.01"
},
"Warned": {
"Operator": ">",
"Value": "100.0",
"Expression": "$checkValue > 0.01"
},
"Critical": {
"Operator": ">",
"Value": "100.0",
"Expression": "$checkValue > 0.05"
}
}
},
"ErrorHandlers": [
{
"Type": "SaveErrorData\n",
"ErrorDataFilter": "SELECT * FROM tb_api_log WHERE id IS NULL\n"
}
]
}
}
エラーコード
完全なリストについては、「エラーコード」をご参照ください。
変更履歴
完全なリストについては、「変更履歴」をご参照ください。