DataWorks のオープンデータは、メタデータを収集するための多次元テーブルとビューを提供します。このトピックでは、利用可能なテーブルとビューをリストアップし、それらのスキーマについて説明します。
メタデータ
DataWorks は、テーブル、タスク、インスタンス、ワークスペース、メンバー、プロジェクトなど、ご利用のテナント内のリソースのメタデータからメタデータテーブルとサンプルメトリックテーブルを生成します。これらのテーブルのスキーマは動的であり、UI に表示されるスキーマが正式なものとなります。
アセットテーブルの問題 (asset_table_issues)
パーティションフィールド: dt
説明: テーブル内のデータガバナンスの問題に関する詳細。
|
パラメーター |
Type |
Description |
|
tenant_id |
string |
DataWorks テナントの ID。 |
|
meta_entity_id |
string |
対応するメタデータエンティティの ID。 |
|
uuid |
string |
テーブルの一意キー。 |
|
meta_entity_type |
string |
対応するメタデータエンティティのタイプ。例:maxcompute-table。 |
|
entity_type |
string |
エンティティタイプ。例:table、view、materialized_view。 |
|
account_id |
string |
アセットを所有するメインアカウント。 |
|
datasource_type |
string |
データソースタイプ。例:E-MapReduce、MaxCompute。 |
|
datasource_id |
string |
エンジンの名前。MaxCompute の場合は projectName、E-MapReduce の場合は clusterId、Hologres の場合は databaseName です。 |
|
catalog_name |
string |
Data Lake Formation カタログの名前。Data Lake Formation がメタデータソースの場合に使用されます。 |
|
database_name |
string |
データベースの名前。E-MapReduce の場合、これは dbName です。 |
|
schema_name |
string |
スキーマの名前。 |
|
rule_id |
string |
ガバナンスルールの ID。 |
|
rule_name_zh |
string |
ガバナンスルールの中国語名。 |
|
rule_name_en |
string |
ガバナンスルールの英語名。 |
|
category |
string |
ガバナンスルールのディメンション。 |
|
deduct_score_tenant |
string |
テナントレベルで減点されるポイント。値は小数点以下 4 桁まで正確です。 |
|
deduct_score_owner |
string |
オーナーレベルで減点されるポイント。値は小数点以下 4 桁まで正確です。 |
|
cost |
string |
浪費されたリソースの量。 |
|
project_id |
string |
DataWorks プロジェクトの ID。 |
|
dt |
string |
日付パーティション。YYYYMMDD 形式の論理パーティションフィールド。 |
アセットテーブルのプロファイル (asset_table_profiles)
パーティションフィールド: dt
説明: テーブルアセットの詳細なメトリック。
|
パラメーター |
Type |
Description |
|
tenant_id |
bigint |
ソーステナントの ID。 |
|
meta_entity_id |
string |
対応するメタデータエンティティの ID。 |
|
meta_entity_type |
string |
対応するメタデータエンティティのタイプ。例: |
|
entity_type |
string |
エンティティタイプ。例: |
|
account_id |
string |
アセットを所有するメインアカウント。 |
|
datasource_type |
string |
データソースタイプ。例: |
|
datasource_id |
string |
エンジン名。例:MaxCompute の場合は |
|
catalog_name |
string |
Data Lake Formation (DLF) カタログ名。このフィールドは、DLF がメタデータソースの場合にのみ入力されます。 |
|
database_name |
string |
データベースの名前。E-MapReduce の場合、これは |
|
schema_name |
string |
スキーマの名前。 |
|
uuid |
string |
テーブルの一意キー。 |
|
name |
string |
テーブルの名前。 |
|
owner |
string |
アセットのオーナー。 |
|
last_access_timestamp |
bigint |
テーブルの最終アクセスタイムスタンプ。 |
|
meta_modified_timestamp |
bigint |
テーブルのメタデータが最後に変更された日時を示す 13 桁の UNIX タイムスタンプ。 |
|
data_modified_timestamp |
bigint |
テーブルのデータが最後に変更された日時を示す 13 桁の UNIX タイムスタンプ。 |
|
create_timestamp |
bigint |
テーブルの作成タイムスタンプ。 |
|
comment |
string |
テーブルのコメント。 |
|
partition_keys |
string |
テーブルのパーティションキー。 |
|
tags |
string |
アセットのタグ。 |
|
governance_rule_finding_count |
bigint |
ガバナンスルールによって特定された問題の数。 |
|
governance_rule_finding_history_count |
string |
アセットのガバナンス検出結果の履歴数。 |
|
governance_health_score |
string |
アセットのガバナンスヘルススコア。 |
|
governance_health_level |
string |
スコアから導出されたアセットのガバナンスヘルスレベル。 |
|
is_partitioned |
bigint |
テーブルがパーティション化されているかどうかを示します。 |
|
content_size |
bigint |
テーブルの論理サイズ。 |
|
record_num |
bigint |
テーブル内のレコード数。 |
|
life_cycle |
string |
テーブルのライフサイクル。 |
|
partition_count |
bigint |
テーブルのパーティション数。 |
|
view_count_monthly |
bigint |
過去 1 か月間のテーブルの閲覧数。 |
|
access_count |
bigint |
テーブルの総アクセス数。 |
|
upstream_table_count |
bigint |
アップストリームテーブルの数。 |
|
upstream_table_detail |
string |
アップストリームテーブルに関する詳細。 |
|
downstream_table_count |
bigint |
ダウンストリームテーブルの数。 |
|
downstream_table_detail |
string |
ダウンストリームテーブルに関する詳細。 |
|
producing_project_ids |
string |
テーブルを生成するワークスペースのリスト。 |
|
producing_tasks_count |
bigint |
このテーブルを生成するタスクの数。 |
|
producing_tasks_detail |
string |
このテーブルを生成するタスクに関する詳細。 |
|
using_tasks_count |
bigint |
このテーブルを使用するタスクの数。 |
|
using_tasks_detail |
string |
このテーブルを使用するタスクに関する詳細。 |
|
quality_rule_count |
bigint |
テーブルの品質ルールの数。 |
|
quality_monitor_count |
bigint |
テーブルの品質モニタリングメトリックの数。 |
|
quality_rule_7_days_failed_count |
bigint |
過去 7 日間の失敗した品質ルールチェックの数。 |
|
quality_monitor_7_days_failed_count |
bigint |
過去 7 日間の失敗した品質モニタリングメトリックチェックの数。 |
|
dt |
string |
日付パーティション。論理パーティションフィールドとして機能します。フォーマットは |
アセットタスクの問題 (asset_task_issues)
パーティションフィールド: dt
説明: タスクで特定されたデータガバナンスの問題の詳細。
|
パラメーター |
Type |
Description |
|
tenant_id |
string |
DataWorks テナントの ID。 |
|
node_id |
string |
スケジューリングノードの ID。 |
|
node_name |
string |
ノードの名前。 |
|
node_type |
string |
ノードのタイプ。有効な値:SQL、SQLCost、LOT、CUPID。 |
|
node_owner |
string |
ノードオーナーのベース ID。 |
|
priority |
string |
ノードの優先度。 |
|
rule_id |
string |
ガバナンスルールの ID。 |
|
rule_name_zh |
string |
ガバナンスルールの中国語名。 |
|
rule_name_en |
string |
ガバナンスルールの英語名。 |
|
category |
string |
ルールのガバナンスドメイン。 |
|
deduct_score_tenant |
string |
テナントのスコア減点。小数点以下 4 桁まで正確です。 |
|
deduct_score_owner |
string |
オーナーのスコア減点。小数点以下 4 桁まで正確です。 |
|
cost |
string |
問題を解決することで得られる利益。通常はコスト削減として測定されます。 |
|
project_id |
string |
DataWorks プロジェクトの ID。 |
|
dt |
string |
論理的な日付パーティション。YYYYMMDD 形式。 |
アセットタスクのプロファイル (asset_task_profiles)
パーティションフィールド: dt
説明: アセットタスクの詳細なメトリック。
|
パラメーター |
Type |
Description |
|
tenant_id |
bigint |
テナントの ID。 |
|
data_asset_id |
string |
モジュール内のアセットの ID。 |
|
name |
string |
アセット名。 |
|
project_id |
bigint |
アセットが配置されているワークスペースの ID。 |
|
project_env |
string |
環境。有効な値:本番環境は |
|
owner |
string |
アセットのオーナー。 |
|
create_user |
string |
アセットを作成したユーザー。 |
|
create_time |
bigint |
アセットが作成された時刻。 |
|
modify_user |
string |
アセットを最後に変更したユーザー。 |
|
modify_time |
bigint |
アセットが最後に変更された時刻。 |
|
trigger_type |
string |
トリガータイプ。有効な値:定期トリガーは |
|
trigger_recurrence_type |
string |
スケジューリング状態。有効な値: |
|
trigger_cron |
string |
cron 式。 |
|
type |
bigint |
ノードによって実行されるコードのタイプ。ノードタイプのコードのリストについては、DataStudio のドキュメント https://www.alibabacloud.com/help/dataworks/user-guide/node-development-of-data-studio をご参照ください。 |
|
script_parameters |
string |
スクリプトパラメーター。 |
|
priority |
bigint |
タスクの優先度。有効な値の範囲は 1 (最低) から 8 (最高) です。デフォルトは 1 です。 |
|
trigger_start_time |
bigint |
スケジューリングの開始日。 |
|
trigger_end_time |
bigint |
スケジューリングの終了日。 |
|
runtime_resource_group_id |
bigint |
ノードが属するリソースグループの ID。 |
|
runtime_cu |
string |
計算ユニット (CU)。 |
|
baseline_id |
bigint |
ノードが属するベースラインの ID。 |
|
rerun_times |
bigint |
タスクを再実行できる最大回数。 |
|
rerun_interval |
bigint |
再実行間隔 (ミリ秒)。 |
|
rerun_mode_type |
string |
タスクを再実行できるタイミングを指定します。有効な値: |
|
tags |
string |
アセットに関連付けられたタグ。 |
|
tags_count |
bigint |
アセットに関連付けられたタグの数。 |
|
input_table_count |
bigint |
入力テーブルの数。 |
|
output_table_count |
bigint |
出力テーブルの数。 |
|
input_table_detail |
string |
入力テーブルの詳細。 |
|
output_table_detail |
string |
出力テーブルの詳細。 |
|
upstream_node_count |
bigint |
アップストリームノードの数。 |
|
downstream_node_count |
bigint |
ダウンストリームノードの数。 |
|
governance_rule_finding_count |
bigint |
ガバナンスルールによって特定された問題の数。 |
|
governance_rule_finding_history_count |
string |
アセットのガバナンス問題の履歴数。 |
|
governance_health_score |
string |
アセットのヘルススコア。 |
|
governance_health_level |
string |
スコアに基づくアセットのヘルスレベル。 |
|
engine_datasource_id |
string |
コンピュートエンジンの ID。 |
|
engine_instance_count |
bigint |
コンピュートエンジンインスタンスの数。 |
|
engine_instance_run_time |
bigint |
コンピュートエンジンインスタンスの総ランタイム。 |
|
engine_instance_comput_volume_cost |
string |
計算量。 |
|
engine_instance_cu_cost |
string |
消費された計算ユニット (CU)。 |
|
engine_instance_cpu_cost |
string |
CPU 消費量。 |
|
engine_instance_mem_cost |
string |
メモリ消費量。 |
|
engine_instance_exist_data_skew |
bigint |
データスキューが存在するかどうかを示します。 |
|
engine_instance_suggestions |
string |
データスキューに対処するための提案。 |
|
engine_instance_data_skew_ids |
string |
データスキューがあるインスタンスの ID。 |
|
engine_instance_ids |
string |
エンジンインスタンスの ID。 |
|
task_instance_wait_time_cost_sum |
bigint |
インスタンスの総待機時間 (ミリ秒)。 |
|
task_instance_wait_time_cost_max |
bigint |
インスタンスの最大待機時間 (ミリ秒)。 |
|
task_instance_run_time_cost_sum |
bigint |
インスタンスの総ランタイム (ミリ秒)。 |
|
task_instance_run_time_cost_max |
bigint |
単一インスタンスの最大ランタイム (ミリ秒)。 |
|
task_instance_7_days_wait_time_cost_max |
bigint |
過去 7 日間の最大インスタンス待機時間 (ミリ秒)。 |
|
task_instance_7_days_run_time_cost_max |
bigint |
過去 7 日間の最大インスタンスランタイム (ミリ秒)。 |
|
task_instance_count |
bigint |
インスタンスの数。 |
|
task_instance_7_days_failed_count |
bigint |
過去 7 日間の失敗したインスタンスの数。 |
|
task_instance_7_days_failed_day_count |
bigint |
過去 7 日間の失敗があった日数のカウント。 |
|
task_instance_7_days_frezeed_day_count |
bigint |
過去 7 日間にタスクが凍結された日数のカウント。 |
|
task_instance_7_days_dry_run_day_count |
bigint |
過去 7 日間にタスクがスキップされた日数のカウント。 |
|
quality_monitor_count |
bigint |
データ品質モニタリングメトリックの数。 |
|
quality_monitor_7_days_failed_count |
bigint |
過去 7 日間の失敗したデータ品質モニタリングメトリックの数。 |
|
di_task_resource_group_id |
string |
ノードが属するデータ統合リソースグループの ID。 |
|
di_task_is_public_network |
bigint |
データ統合タスクがパブリックネットワークトラフィックを使用するかどうかを示します。 |
|
di_task_concurrency |
bigint |
データ統合タスクの同時実行レベル。 |
|
di_task_total_records |
bigint |
同期されたレコードの総数。 |
|
di_task_total_bytes |
bigint |
同期されたデータの総量 (バイト)。 |
|
di_task_source_type |
string |
データソースのタイプ。 |
|
di_task_target_type |
string |
データターゲットのタイプ。 |
|
di_task_run_time_cost |
bigint |
データ統合タスクのランタイム (ミリ秒)。 |
|
di_task_wait_time_cost |
bigint |
データ統合タスクの待機時間 (ミリ秒)。 |
|
dt |
string |
レコードの日付パーティション。 |
データカタログ (catalogs)
|
パラメーター |
Type |
Description |
|
datasource_type |
string |
データソースタイプ。例:DLF、StarRocks。 |
|
datasource_id |
string |
データソース ID。例:StarRocks クラスター ID、または DLF のメインアカウント ID。 |
|
name |
string |
データカタログ名。 |
|
type |
string |
データカタログタイプ。例:Hive、JDBC。 |
|
comment |
string |
データカタログのコメント。 |
|
location |
string |
データカタログの場所。 |
|
properties |
string |
構成プロパティ。JSON 文字列として指定されます。 |
|
owner |
string |
データカタログのオーナー。この値は、データソースタイプに応じて Alibaba Cloud アカウント UID またはデータベースアカウントになります。 |
|
create_timestamp |
bigint |
データカタログが作成された時刻。13 桁のタイムスタンプ (ミリ秒) で表されます。 |
|
update_timestamp |
bigint |
データカタログが最後に更新された時刻。13 桁のタイムスタンプ (ミリ秒) で表されます。 |
|
meta_entity_id |
string |
メタデータエンティティ ID 仕様に準拠した、データカタログの一意で API フレンドリな識別子。 |
|
dt |
string |
日付パーティション。YYYYMMDD 形式の論理パーティションフィールド。有効な値:[TODAY-31D, TODAY-1D]。 |
列
|
パラメーター |
Type |
Description |
|
datasource_type |
string |
データソースのタイプ。例:DLF、StarRocks。 |
|
datasource_id |
string |
データソースの ID。例:StarRocks クラスター ID、DLF または MaxCompute のメインアカウント ID、RDS インスタンス ID。 |
|
catalog_name |
string |
データカタログの名前。このフィールドは、データソースタイプがデータカタログをサポートする場合にのみ入力されます。 |
|
database_name |
string |
データベースの名前。 |
|
schema_name |
string |
スキーマの名前。このフィールドは、データソースタイプがスキーマをサポートする場合にのみ入力されます。 |
|
table_name |
string |
テーブルの名前。 |
|
name |
string |
列の名前。 |
|
type |
string |
列のデータの型。 |
|
comment |
string |
列のコメント。 |
|
ordinal_position |
bigint |
テーブル内での列の 1 から始まる序数位置。 |
|
is_primary_key |
boolean |
列がプライマリキーの一部であるかどうかを示します。 |
|
is_nullable |
boolean |
列が NULL 値を許可するかどうかを示します。 |
|
is_partition_key |
boolean |
列がパーティションキーであるかどうかを示します。 |
|
properties |
string |
プロパティとパラメーターの JSON 文字列。 |
|
business_description |
string |
列のビジネス上の説明。 |
|
meta_entity_id |
string |
列の一意の識別子。API フレンドリであり、メタデータエンティティ ID 仕様に準拠しています。 |
|
dt |
string |
日付パーティション (論理パーティション列)。YYYYMMDD 形式。有効範囲:[TODAY-31D, TODAY-1D]。 |
データベース
|
パラメーター |
Type |
Description |
|
datasource_type |
string |
データソースのタイプ。例: |
|
datasource_id |
string |
データソース ID。例:StarRocks クラスター ID、Data Lake Formation (DLF) または MaxCompute のプライマリアカウント ID、RDS インスタンス ID。 |
|
catalog_name |
string |
カタログ名。このフィールドは、データソースタイプがカタログをサポートする場合にのみ入力されます。 |
|
name |
string |
データベース名。 |
|
type |
string |
データベースタイプ。 |
|
comment |
string |
データベースのコメント。 |
|
location |
string |
データベースパス。 |
|
properties |
string |
プロパティとパラメーター (JSON 文字列)。 |
|
owner |
string |
データベースのオーナー。値は、データソースタイプに応じて Alibaba Cloud アカウント UID またはデータベースシステムアカウントです。 |
|
is_external |
boolean |
データベースが外部データベースであるかどうかを示します。 |
|
create_timestamp |
bigint |
作成時刻を示す 13 桁のタイムスタンプ。 |
|
update_timestamp |
bigint |
最終更新時刻を示す 13 桁のタイムスタンプ。 |
|
meta_entity_id |
string |
データベースの一意の識別子。この ID はメタデータエンティティ ID 仕様に準拠しています。 |
|
dt |
string |
日付パーティション (論理パーティションフィールド)。YYYYMMDD 形式。有効な値:[TODAY-31D, TODAY-1D]。 |
テーブルおよび列レベルのデータリネージ (lineages)
|
パラメーター |
Type |
Description |
|
source_meta_entity_id |
string |
ソースの一意の識別子。この識別子は API フレンドリであり、メタデータエンティティ ID 仕様に準拠しています。 |
|
source_raw_entity_type |
string |
ソースのエンティティタイプ。このフィールドは、エンティティのメタデータが管理されておらず、 |
|
source_uuid |
string |
ページアクセスに使用されるソースの一意で UI フレンドリな識別子。 |
|
target_meta_entity_id |
string |
ターゲットの一意の識別子。この識別子は API フレンドリであり、メタデータエンティティ ID 仕様に準拠しています。 |
|
target_raw_entity_type |
string |
ターゲットのエンティティタイプ。このフィールドは、エンティティのメタデータが管理されておらず、 |
|
target_uuid |
string |
ページアクセスに使用されるターゲットの一意で UI フレンドリな識別子。 |
|
compute_engine |
string |
コンピュートエンジン。例: |
|
transform_type |
string |
コンピュートエンジンによって実行される変換タスクのタイプ。例: |
|
task_id |
bigint |
DataWorks の定期タスクの ID。 |
|
task_instance_id |
bigint |
DataWorks の定期タスクインスタンスの ID。 |
|
lineage_time |
bigint |
データリネージが生成されたタイムスタンプ (ミリ秒)。 |
|
granularity |
string |
データリネージのレベル。例: |
|
dt |
string |
日付パーティション (論理パーティションフィールド)。YYYYMMDD 形式。値の範囲:[TODAY-31D, TODAY-1D]。 |
パーティション
|
パラメーター |
Type |
Description |
|
datasource_type |
string |
データソースタイプ。例:MaxCompute、DLF、StarRocks。 |
|
datasource_id |
string |
データソース ID。例:StarRocks クラスター ID、DLF または MaxCompute のメインアカウント ID、RDS インスタンス ID。 |
|
catalog_name |
string |
データカタログの名前。このフィールドは、データソースタイプがデータカタログをサポートする場合に入力されます。 |
|
database_name |
string |
データベースの名前。 |
|
schema_name |
string |
スキーマの名前。このフィールドは、データソースタイプがスキーマをサポートする場合に入力されます。 |
|
table_name |
string |
テーブルの名前。 |
|
name |
string |
パーティション名 (パーティション仕様)。 |
|
create_timestamp |
bigint |
13 桁の作成タイムスタンプ。 |
|
update_timestamp |
bigint |
13 桁の更新タイムスタンプ。 |
|
content_size |
bigint |
パーティションサイズ (バイト)。 |
|
properties |
string |
プロパティとパラメーターの JSON 文字列。 |
|
dt |
string |
日付パーティション (論理パーティションフィールド)。YYYYMMDD 形式。有効な値の範囲は [TODAY-31D, TODAY-1D] です。 |
リソースグループ
|
パラメーター |
Type |
Description |
|
resource_group_id |
bigint |
リソースグループの ID。 |
|
resource_group_identifier |
string |
リソースグループの識別子。 |
|
resource_group_type |
bigint |
リソースグループのタイプ。有効な値:1 (スケジューリングリソースグループ)、2 (MaxCompute リソースグループ)、4 (データ統合リソースグループ)。 |
|
resource_group_mode |
bigint |
リソースグループのモード。有効な値:1 (前払い)、2 (従量課金)、3 (開発者版、MaxCompute のみ)。 |
|
resource_group_status |
bigint |
リソースグループのステータス。有効な値:0 (通常)、1 (凍結)、2 (削除済み)、3 (作成中)、4 (作成失敗)、5 (更新中)、6 (更新失敗)、7 (削除中)、8 (削除失敗)。 |
|
is_exclusive_resource_group |
boolean |
これが排他的なリソースグループであるかどうかを指定します。 |
|
dt |
string |
日付パーティション、論理パーティションフィールド。フォーマット:YYYYMMDD。値の範囲:[TODAY-31D, TODAY-1D]。 |
スキーマ
|
パラメーター |
Type |
Description |
|
datasource_type |
string |
データソースタイプ。例:holodb、MaxCompute、PostgreSQL。 |
|
datasource_id |
string |
データソース ID。例:RDS インスタンス ID または MaxCompute のアカウント ID。 |
|
catalog_name |
string |
データカタログ名。このフィールドは、データソースタイプがデータカタログをサポートする場合にのみ入力されます。 |
|
database_name |
string |
データベース名。 |
|
name |
string |
スキーマ名。 |
|
type |
string |
スキーマタイプ。 |
|
comment |
string |
スキーマに関するコメント。 |
|
properties |
string |
プロパティとパラメーター。JSON 文字列形式。 |
|
owner |
string |
スキーマオーナー。値は、データソースタイプに応じて Alibaba Cloud アカウント UID またはデータベースアカウントになります。 |
|
create_timestamp |
bigint |
作成時刻。13 桁の UNIX タイムスタンプで表されます。 |
|
update_timestamp |
bigint |
最終更新時刻。13 桁の UNIX タイムスタンプで表されます。 |
|
meta_entity_id |
string |
スキーマの一意の識別子。API フレンドリであり、メタエンティティ ID 仕様に準拠しています。 |
|
dt |
string |
日付パーティション (論理パーティションフィールド)。YYYYMMDD 形式。値の範囲は [TODAY-31D, TODAY-1D] です。 |
テーブル
|
パラメーター |
Type |
Description |
|
datasource_type |
string |
データソースタイプ。例:Data Lake Formation、StarRocks、MaxCompute、Hologres、MySQL。 |
|
datasource_id |
string |
データソース ID。この値は、StarRocks クラスターの場合はクラスター ID、Data Lake Formation または MaxCompute の場合はメインアカウント ID、RDS インスタンスの場合はインスタンス ID です。 |
|
catalog_name |
string |
データカタログの名前。このフィールドは、データカタログをサポートするデータソースタイプにのみ適用されます。 |
|
database_name |
string |
データベースの名前。 |
|
schema_name |
string |
スキーマの名前。このフィールドは、スキーマをサポートするデータソースタイプにのみ適用されます。 |
|
name |
string |
テーブルの名前。 |
|
type |
string |
テーブルのタイプ。 |
|
comment |
string |
テーブルのコメント。 |
|
partition_keys |
string |
パーティションキー。複数レベルのパーティションの場合、キーはカンマ (,) で区切られます。 |
|
location |
string |
テーブルのストレージパス。 |
|
properties |
string |
プロパティとパラメーターの JSON 文字列。ビューの場合、このフィールドにはビューの DDL 定義が含まれます。 |
|
owner |
string |
テーブルオーナー。値は、データソースタイプに応じて Alibaba Cloud アカウント ID またはデータベースシステムアカウントになります。 |
|
content_size |
bigint |
ストレージサイズ (バイト)。 |
|
data_retention |
map<string,string> |
データ保持期間またはライフサイクル。値はテーブルタイプによって異なります。MaxCompute テーブルの場合、キーは |
|
is_compressed |
boolean |
テーブルが圧縮されているかどうかを示します。 |
|
is_temporary |
boolean |
テーブルが一時テーブルであるかどうかを示します。 |
|
entity_type |
string |
エンティティのタイプ。例: |
|
input_format |
string |
入力フォーマット。 |
|
output_format |
string |
出力フォーマット。 |
|
serde_parameters |
string |
SerDe パラメーター。 |
|
serialization_lib |
string |
シリアル化ライブラリ。 |
|
create_timestamp |
bigint |
テーブルが作成された日時を示す 13 桁の UNIX タイムスタンプ。 |
|
meta_modified_timestamp |
bigint |
テーブルメタデータが最後に変更された日時を示す 13 桁の UNIX タイムスタンプ。 |
|
data_modified_timestamp |
bigint |
テーブルデータが最後に変更された日時を示す 13 桁の UNIX タイムスタンプ。 |
|
last_access_timestamp |
bigint |
テーブルが最後にアクセスされた日時を示す 13 桁の UNIX タイムスタンプ。 |
|
business_description |
string |
ビジネス上の説明または中国語名。 |
|
meta_entity_id |
string |
テーブルの一意の識別子。この ID は API での使用を目的としており、メタデータエンティティ ID 仕様に準拠しています。 例:
|
|
uuid |
string |
テーブルの UUID。DataWorks データマップのテーブル詳細ページにリンクするために使用されます。 |
|
business_tags |
array<string> |
ビジネスタグ。このフィールドには、データマップページで設定されたタグが含まれます。 |
|
wikis |
array<struct< |
テーブル Wiki。構造体には次のフィールドが含まれます: |
|
producing_tasks |
array<bigint> |
このテーブルのデータを生成するスケジューリングタスク ID のリスト。詳細については、 |
|
dt |
string |
日付パーティション (論理パーティションフィールド)。YYYYMMDD 形式。有効な値: |
タスクおよびワークフローの実行インスタンス (task_instances)
|
パラメーター |
Type |
Description |
|
id |
bigint |
タスクインスタンス ID。 |
|
node_id |
bigint |
タスク ID。 |
|
node_type |
bigint |
タスクタイプ。ノードコード値のリストについては、ノード開発をご参照ください。 |
|
node_name |
string |
タスクの名前。 |
|
description |
string |
タスクの説明。 |
|
workflow_id |
bigint |
ワークフローの ID。 |
|
workflow_name |
string |
ワークフローの名前。 |
|
workflow_instance_id |
bigint |
ワークフローインスタンスの ID。 |
|
workflow_instance_type |
bigint |
ワークフローインスタンスのタイプ。有効な値:0 (日次スケジューリング)、1 (手動タスク)、2 (スモークテスト)、3 (バックフィル)、4 (ワンタイムワークフロー)、5 (手動ワークフロー)。 |
|
trigger_type |
string |
トリガータイプ (スケジューラ/手動)。 |
|
trigger_recurrence |
string |
実行モード。有効な値:0 (通常)、1 (手動)、2 (一時停止)、3 (ドライラン)、4 (参照)。 |
|
timeout |
bigint |
タスク実行のタイムアウト (時間)。 |
|
rerun_mode |
string |
再実行の構成。有効な値:0 (失敗時に再実行可能)、1 (失敗または成功時に再実行可能)、2 (再実行不可)。 |
|
run_number |
bigint |
実行回数。 |
|
period_number |
bigint |
期間番号。 |
|
baseline_id |
bigint |
ベースラインの ID。 |
|
priority |
bigint |
タスクの優先度 (1-8)。 |
|
script_parameters |
string |
実行用のスクリプトパラメーターのリスト。 |
|
runtime_resource_group_id |
bigint |
タスク実行用のリソースグループ ID。 |
|
runtime_resource_group_identifier |
string |
タスク実行用のリソースグループ識別子。 |
|
runtime_image |
string |
ランタイムイメージ ID。 |
|
runtime_cu |
string |
ランタイムで消費される CU。 |
|
runtime_process_id |
string |
ランタイムのプロセス ID。 |
|
runtime_gateway |
string |
ランタイムで使用されるゲートウェイ。 |
|
datasource_name |
string |
データソースの名前。 |
|
inputs_variables |
array<struct< |
入力変数のリスト。 |
|
outputs |
array<struct< |
出力識別子のリスト。 |
|
outputs_variables |
array<struct< |
出力変数のリスト。 |
|
tags |
array<struct< |
タスクタグのリスト。 |
|
status |
bigint |
タスクのステータス。有効な値:1 (未実行)、2 (スケジュール待機中)、3 (リソース待機中)、4 (実行中)、5 (失敗)、6 (成功)、7 (検証中)、8 (条件保留中)、9 (トリガー待機中)。 |
|
trigger_time |
string |
タスクがトリガーされた時刻。 |
|
bizdate |
string |
ビジネス日付。 |
|
started_time |
string |
タスクが開始された時刻。 |
|
finished_time |
string |
タスクが終了した時刻。 |
|
project_id |
bigint |
プロジェクト ID。 |
|
project_env |
string |
環境タイプ (PROD/DEV)。 |
|
owner |
string |
オーナーのアカウント ID。 |
|
create_time |
string |
作成時刻。 |
|
modify_time |
string |
最終変更時刻。 |
|
create_user |
string |
作成者のユーザー ID。 |
|
modify_user |
string |
最終変更者のユーザー ID。 |
|
waiting_resource_time |
string |
リソースを待機していた時間。 |
|
waiting_trigger_time |
string |
トリガーを待機していた時間。 |
|
dt |
string |
論理的な日付パーティション。YYYYMMDD 形式。値の範囲:[TODAY-31D, TODAY-1D]。 |
タスクおよびワークフローの定義 (tasks)
|
パラメーター |
Type |
Description |
|
id |
bigint |
タスク ID。 |
|
name |
string |
タスク名。 |
|
description |
string |
タスクの説明。 |
|
type |
bigint |
タスクタイプ。ノードコード値については、ノード開発をご参照ください。 |
|
workflow_id |
bigint |
ワークフロー ID。 |
|
instance_mode |
string |
インスタンス生成モード。
|
|
baseline_id |
bigint |
ベースライン ID。 |
|
priority |
bigint |
タスクの優先度。 |
|
timeout |
bigint |
タスク実行のタイムアウト (時間)。 |
|
rerun_mode |
bigint |
タスクの再実行ポリシー。有効な値: |
|
rerun_times |
bigint |
再実行の試行回数。この設定は、タスクが再実行を許可するように構成されている場合にのみ適用されます。 |
|
rerun_interval |
bigint |
再実行の試行間隔 (秒)。 |
|
script_parameters |
string |
ランタイムのスクリプトパラメーター。 |
|
trigger_type |
string |
トリガータイプ。有効な値: |
|
trigger_recurrence |
bigint |
タスクがトリガーされたときの実行モード。有効な値: |
|
trigger_cron |
string |
Cron 式。 |
|
trigger_start_time |
string |
スケジュールされたトリガーの開始時刻。 |
|
trigger_end_time |
string |
スケジュールされたトリガーの有効期限。 |
|
runtime_resource_group_id |
bigint |
タスクランタイムのリソースグループの ID。 |
|
runtime_image |
string |
タスクランタイムのイメージ ID。 |
|
runtime_cu |
string |
タスクランタイムの CU 消費量。 |
|
datasource_name |
string |
データソース名。 |
|
inputs_variables |
array<struct< |
入力変数。 |
|
outputs |
array<struct< |
タスク出力識別子。 |
|
outputs_variables |
array<struct< |
出力変数。 |
|
dependencies |
array<struct< |
依存関係。 |
|
related_workflow_id |
bigint |
関連ワークフローの ID。 |
|
tags |
array<struct< |
タスクタグ。 |
|
project_id |
bigint |
プロジェクト ID。 |
|
project_env |
string |
環境タイプ。有効な値: |
|
owner |
string |
タスクオーナーのアカウント ID。 |
|
create_time |
string |
作成時刻。 |
|
modify_time |
string |
最終変更時刻。 |
|
create_user |
string |
タスクを作成したユーザーのアカウント ID。 |
|
modify_user |
string |
タスクを最後に変更したユーザーのアカウント ID。 |
|
dt |
string |
|
ユーザー
|
パラメーター |
Type |
Description |
|
user_id |
string |
ユーザーの一意の識別子。 |
|
user_nick |
string |
ユーザーのアカウントエイリアスまたは表示名。 |
|
dt |
string |
論理パーティションフィールド。YYYYMMDD 形式の日付パーティションを表します。有効な値:[TODAY-31D, TODAY-1D]。 |
ワークスペースのメンバー
|
パラメーター |
Type |
Description |
|
workspace_id |
bigint |
ワークスペース ID。 |
|
user_id |
string |
ユーザー ID。 |
|
user_status |
bigint |
ユーザーステータス。有効な値: |
|
gmt_create_ts |
bigint |
作成時刻、13 桁のタイムスタンプ。 |
|
gmt_modified_ts |
bigint |
変更時刻、13 桁のタイムスタンプ。 |
|
dt |
string |
|
ワークスペース
|
パラメーター |
Type |
Description |
|
workspace_id |
bigint |
ワークスペース ID。 |
|
workspace_name |
string |
ワークスペース名。 |
|
workspace_identifier |
string |
ワークスペース識別子。 |
|
workspace_description |
string |
ワークスペースの説明。 |
|
workspace_owner |
string |
ワークスペースオーナー ID。 |
|
workspace_status |
bigint |
ワークスペースのステータス。有効な値: |
|
dt |
string |
日付パーティション (論理パーティションフィールド)。フォーマット: |
データ品質ルールインスタンス (quality_rule_results)
パーティションフィールド: dt
説明: データ品質ルールインスタンスについて説明します。
|
パラメーター |
Type |
Description |
|
id |
bigint |
プライマリキー。 |
|
scan_run_id |
bigint |
品質モニタリングインスタンスの ID。 |
|
rule_id |
bigint |
ルールの ID。 |
|
rule_name |
string |
ルールの名前。 |
|
status |
string |
ルールの検証結果。可能な値:Pass、Error、Warn、Fail、または Running。 |
|
severity |
string |
ルールの強度。可能な値:High (強ルール) または Normal (弱ルール)。 |
|
create_time |
bigint |
インスタンスの作成時刻。 |
|
modify_time |
bigint |
インスタンスの最終変更時刻。 |
|
spec |
string |
ルールインスタンスの仕様。 |
|
tags |
array<string> |
ルールインスタンスのタグ。 |
|
tenant_id |
bigint |
DataWorks テナントの ID。 |
|
project_id |
bigint |
DataWorks ワークスペースの ID。 |
|
meta_entity_id |
string |
メタテーブルエンティティの一意の識別子。 |
|
dt |
string |
日付パーティション。YYYYMMDD 形式。値の範囲:[TODAY-D, TODAY-1D]。 |
データ品質ルールメトリック (quality_rules)
パーティションフィールド: dt
説明: 各データ品質ルールの詳細なメトリック。
|
パラメーター |
Type |
Description |
|
id |
bigint |
プライマリキー。 |
|
scan_id |
bigint |
品質モニタリングインスタンスの ID。 |
|
rule_name |
string |
ルールの名前。 |
|
enabled |
boolean |
ルールが有効かどうかを示します。 |
|
severity |
string |
ルールの強度。可能な値: |
|
create_time |
bigint |
ルールが作成された時刻。 |
|
modify_time |
bigint |
ルールが最後に変更された時刻。 |
|
spec |
string |
ルールの仕様。 |
|
tags |
array<string> |
ルールのタグ。 |
|
tenant_id |
bigint |
DataWorks テナントの ID。 |
|
project_id |
bigint |
DataWorks ワークスペースの ID。 |
|
meta_entity_id |
string |
データマップ内のメタエンティティの一意の識別子。 |
|
pass_count |
int |
ルールが合格した回数。 |
|
warn_count |
int |
ルールが警告をトリガーした回数。 |
|
error_count |
int |
ルールがエラーをトリガーした回数。 |
|
fail_count |
int |
ルールが失敗した回数。 |
|
dt |
string |
日付パーティション。 |
データ品質スキャン実行 (quality_scan_runs)
パーティションフィールド: dt
説明: 各データ品質スキャン実行に関する情報を格納します。
|
パラメーター |
Type |
Description |
|
id |
bigint |
プライマリキー。 |
|
scan_id |
bigint |
データ品質スキャン ID。 |
|
name |
string |
スキャンの名前。 |
|
status |
string |
スキャン実行のステータス。有効な値: |
|
post_action_type |
string |
チェック後のアクション。有効な値: |
|
data_filter |
string |
サンプリングに使用されるデータ範囲。 |
|
trigger_time |
bigint |
タスクのスケジュール時刻。 |
|
trigger_type |
string |
データ品質スキャンのトリガータイプ。有効な値: |
|
create_time |
bigint |
スキャン実行の作成時刻。 |
|
modify_time |
bigint |
スキャン実行が最後に変更された時刻。 |
|
datasource_id |
bigint |
テーブルが属するデータソースの ID。 |
|
datasource_type |
string |
データソースのタイプ。 |
|
computing_resource_id |
bigint |
計算リソースの ID。 |
|
compute_resource_option |
string |
スキャン実行に使用される計算リソース。 |
|
spec |
string |
データ品質スキャンの仕様。 |
|
tenant_id |
bigint |
DataWorks テナントの ID。 |
|
project_id |
bigint |
DataWorks ワークスペースの ID。 |
|
owner |
string |
データ品質スキャンのオーナー。 |
|
task_id |
bigint |
スケジューリングタスクの ID。 |
|
task_instance_id |
bigint |
スケジューリングタスクインスタンスの ID。 |
|
meta_entity_id |
string |
メタデータエンティティの一意の識別子。 |
|
table_name |
string |
テーブルの名前。 |
|
catalog_name |
string |
テーブルのデータカタログの名前。 |
|
schema_name |
string |
テーブルのスキーマの名前。 |
|
database_name |
string |
テーブルのデータベースの名前。 |
|
cluster_id |
string |
テーブルのクラスターの ID。 |
|
dt |
string |
日付パーティション。 |
データ品質スキャンメトリック (quality_scans)
パーティションフィールド: dt
説明: データ品質モニタリングタスクの詳細なメトリック。
|
パラメーター |
Type |
Description |
|
id |
bigint |
品質スキャンの一意の識別子。 |
|
name |
string |
品質スキャンの名前。 |
|
data_filter_type |
string |
データフィルターのタイプ。有効な値: |
|
data_filter |
string |
データフィルター式。 |
|
trigger_type |
string |
データ品質モニタリングのトリガータイプ。有効な値: |
|
create_time |
bigint |
品質スキャンが作成された時刻。 |
|
modify_time |
bigint |
品質スキャンが最後に更新された時刻。 |
|
computing_resource_id |
bigint |
コンピュートエンジンの ID。 |
|
compute_resource_option |
string |
データ品質モニタリングタスクの計算リソース。 |
|
spec |
string |
データ品質モニタリングの仕様。 |
|
related_tasks |
array<bigint> |
関連するスケジューリングタスク。 |
|
tenant_id |
bigint |
DataWorks テナントの ID。 |
|
project_id |
bigint |
DataWorks ワークスペースの ID。 |
|
owner |
string |
品質スキャンのオーナー。 |
|
datasource_id |
string |
テーブルのデータソースの ID。 |
|
datasource_type |
string |
データソースのタイプ。 |
|
meta_entity_id |
string |
データカタログ内のメタエンティティの一意の識別子。 |
|
table_name |
string |
テーブルの名前。 |
|
catalog_name |
string |
テーブルのデータカタログの名前。 |
|
schema_name |
string |
テーブルのスキーマの名前。 |
|
database_name |
string |
テーブルのデータベースの名前。 |
|
cluster_id |
string |
テーブルのクラスターの ID。 |
|
related_scheduler_task_count |
int |
関連するスケジューリングタスクの数。 |
|
rule_count |
int |
関連するルールの数。 |
|
high_severity_rule_count |
int |
関連付けられた高重大度ルールの数。 |
|
normal_severity_rule_count |
int |
通常深刻度の関連ルール数 |
|
enabled_rule_count |
int |
有効なルールの数。 |
|
enabled_high_severity_rule_count |
int |
有効な強ルールの数。 |
|
enabled_normal_severity_rule_count |
int |
通常の重要度の有効なルールの数 |
|
rule_instance_count |
int |
本日実行されたルールインスタンスの数。 |
|
high_severity_rule_instance_count |
int |
本日実行された強ルールインスタンスの数。 |
|
normal_severity_rule_instance_count |
int |
本日実行された通常重要度のルールインスタンスの数。 |
|
high_severity_rule_instance_pass_count |
int |
本日合格した強ルールインスタンスの数。 |
|
high_severity_rule_instance_warn_count |
int |
本日警告 (オレンジ色のアラート) があった強ルールインスタンスの数。 |
|
high_severity_rule_instance_error_count |
int |
本日エラー (赤色のアラート) があった強ルールインスタンスの数。 |
|
high_severity_rule_instance_fail_count |
int |
本日失敗した強ルールインスタンスの数。 |
|
normal_severity_rule_instance_pass_count |
int |
本日合格した弱ルールインスタンスの数。 |
|
normal_severity_rule_instance_warn_count |
int |
本日警告 (オレンジ色のアラート) があった弱ルールインスタンスの数。 |
|
normal_severity_rule_instance_error_count |
int |
本日エラー (赤色のアラート) が発生した、重要度が通常のルールインスタンスの数。 |
|
normal_severity_rule_instance_fail_count |
int |
本日失敗した弱ルールインスタンスの数。 |
|
block_task_instance_count |
int |
本日ブロックされたスケジューリングタスクの数。 |
|
alert_rule_count |
int |
構成されたアラートサブスクリプションの数。 |
|
sms_alert_rule_count |
int |
構成された SMS アラートサブスクリプションの数。 |
|
mail_alert_rule_count |
int |
構成されたメールアラートサブスクリプションの数。 |
|
phone_alert_rule_count |
int |
構成された電話アラートサブスクリプションの数。 |
|
ding_alert_rule_count |
int |
構成された DingTalk アラートサブスクリプションの数。 |
|
feishu_alert_rule_count |
int |
構成された Lark アラートサブスクリプションの数。 |
|
weixin_alert_rule_count |
int |
構成された WeChat アラートサブスクリプションの数。 |
|
webhook_alert_rule_count |
int |
構成されたカスタム Webhook アラートサブスクリプションの数。 |
|
alert_times |
int |
本日トリガーされたアラートの数。 |
|
sms_alert_times |
int |
本日トリガーされた SMS アラートの数。 |
|
mail_alert_times |
int |
本日トリガーされたメールアラートの数。 |
|
phone_alert_times |
int |
本日トリガーされた電話アラートの数。 |
|
ding_alert_times |
int |
本日トリガーされた DingTalk アラートの数。 |
|
feishu_alert_times |
int |
本日トリガーされた Lark アラートの数。 |
|
weixin_alert_times |
int |
本日トリガーされた WeChat アラートの数。 |
|
webhook_alert_times |
int |
本日トリガーされたカスタム Webhook アラートの数。 |
|
dt |
string |
|
データ品質の概要 (table_quality_summary)
パーティションフィールド: dt
説明: テーブルのデータ品質メトリックが含まれています。
|
パラメーター |
Type |
Description |
|
meta_entity_id |
string |
テーブルのメタエンティティの一意の識別子。 |
|
project_id |
bigint |
DataWorks ワークスペースの ID。 |
|
table_name |
string |
テーブルの名前。 |
|
schema_name |
string |
テーブルのスキーマの名前。 |
|
database_name |
string |
テーブルのデータベースの名前。 |
|
catalog_name |
string |
テーブルのデータカタログの名前。 |
|
datasource_id |
bigint |
テーブルのデータソースの ID。データ品質が構成されていない場合、このフィールドは NULL です。 |
|
tenant_id |
bigint |
DataWorks テナントの ID。 |
|
owner |
string |
テーブルのオーナー。 |
|
scan_count |
int |
構成された品質モニターの数。 |
|
scheduler_related_scan_count |
int |
スケジューリングにリンクされた品質モニターの数。 |
|
scan_run_count |
int |
本日の品質モニタリングタスクインスタンスの数。 |
|
alert_scan_run_count |
int |
本日アラートをトリガーした品質モニタリングタスクインスタンスの数。 |
|
block_task_instance_scan_run_count |
int |
本日スケジューリングタスクをブロックした品質モニタリングタスクインスタンスの数。 |
|
rule_count |
int |
構成されたルールの数。 |
|
enabled_rule_count |
int |
有効なルールの数。 |
|
high_severity_rule_count |
int |
構成された強ルールの数。 |
|
normal_severity_rule_count |
int |
設定済みの、重要度が中程度のルール数 |
|
rule_instance_count |
int |
本日のルールインスタンスの数。 |
|
high_severity_rule_instance_count |
int |
本日の重大度の高いルールインスタンス数。 |
|
normal_severity_rule_instance_count |
int |
本日の重要度が「通常」のルールインスタンスの数。 |
|
high_severity_rule_instance_pass_count |
int |
本日成功した強ルールチェックの数。 |
|
high_severity_rule_instance_warn_count |
int |
本日警告をトリガーした強ルールチェックの数。 |
|
high_severity_rule_instance_error_count |
int |
本日エラーをトリガーした強ルールチェックの数。 |
|
high_severity_rule_instance_fail_count |
int |
本日失敗した強ルールチェックの数。 |
|
normal_severity_rule_instance_pass_count |
int |
本日成功した通常の重要度のルールチェックの数 |
|
normal_severity_rule_instance_warn_count |
int |
本日警告をトリガーした弱ルールチェックの数。 |
|
normal_severity_rule_instance_error_count |
int |
本日エラーをトリガーした、重要度が通常のルールチェックの数。 |
|
normal_severity_rule_instance_fail_count |
int |
本日、通常の重要度で失敗したルールチェックの数。 |
|
dt |
string |
YYYYMMDD 形式の日付パーティション。値は、現在の日付の 31 日前から現在の日付の 1 日前までの範囲、つまり [TODAY-31D, TODAY-1D] の範囲に一致します。 |
サンプルメタデータ
テーブルメトリック詳細 (table_metrics_detail)
|
パラメーター |
Type |
Description |
|
datasource_type |
string |
データソースタイプ。 |
|
datasource_id |
string |
データソース ID。 |
|
catalog_name |
string |
データカタログ名。 |
|
database_name |
string |
データベース名。 |
|
schema_name |
string |
スキーマ名。 |
|
table_name |
string |
テーブル名。 |
|
table_uuid |
string |
テーブルの UUID。詳細ページへのアクセスに使用されます。 |
|
meta_entity_id |
string |
テーブルの人間が読める ID。 |
|
content_size |
bigint |
収集されたストレージサイズ。ストレージサイズの収集がサポートされていない場合、この値は |
|
daily_rate_cs |
decimal(16,6) |
ストレージサイズの前日比変化率。 |
|
avg_content_size_7d |
bigint |
7 日間の平均ストレージサイズ。 |
|
daily_rate_acs_7d |
decimal(16,6) |
7 日間の平均ストレージサイズの前日比変化率。 |
|
latest_data_update_time_31d |
bigint |
過去 31 日以内の最新のデータ更新のタイムスタンプ。この時間は、データリネージ内の対応するダウンストリームインスタンスの終了時刻から導出され、最大の |
|
latest_data_update_task_id |
bigint |
過去 31 日以内にテーブルを最後に更新したスケジューリングタスクの ID。 |
|
latest_data_update_instance_id |
bigint |
過去 31 日以内にテーブルを最後に更新したスケジューリングタスクインスタンスの ID。 |
|
latest_data_update_time_by_task |
bigint |
過去 31 日以内にテーブルを最後に更新したスケジューリングタスクインスタンスの終了時刻。 |
|
writing_task_ids |
array<bigint> |
現在のビジネス日付にテーブルに書き込んだスケジューリングタスク ID の一意のリスト。 |
|
writing_task_ids_31d |
array<bigint> |
過去 31 日以内にテーブルに書き込んだスケジューリングタスク ID の一意のリスト。 |
|
latest_data_access_time_31d |
bigint |
過去 31 日以内の最新のデータアクセスのタイムスタンプ。この時間は、データリネージ内の対応するアップストリームインスタンスの終了時刻から導出され、最大の |
|
latest_data_access_task_id |
bigint |
過去 31 日以内にテーブルから最後に読み取ったスケジューリングタスクの ID。 |
|
latest_data_access_instance_id |
bigint |
過去 31 日以内にテーブルから最後に読み取ったスケジューリングタスクインスタンスの ID。 |
|
latest_data_access_time_by_task |
bigint |
過去 31 日以内にテーブルから最後に読み取ったスケジューリングタスクインスタンスの終了時刻。 |
|
reading_task_ids |
array<string> |
現在のビジネス日付にテーブルから読み取ったスケジューリングタスク ID の一意のリスト。 |
|
reading_task_ids_31d |
array<string> |
過去 31 日以内にテーブルから読み取ったスケジューリングタスク ID の一意のリスト。 |
|
direct_downstream_tables |
array<string> |
直接のダウンストリームテーブル UUID のリスト。 |
|
direct_upstream_tables |
array<string> |
直接のアップストリームテーブル UUID のリスト。 |
|
dt |
string |
日付パーティション。YYYYMMDD 形式。有効な値は [TODAY-31D, TODAY-1D] の範囲です。 |
テーブルメトリックの概要 (table_metrics_summary)
|
パラメーター |
Type |
Description |
|
table_count |
bigint |
テーブルの数。 |
|
daily_rate_tc |
decimal(16,6) |
テーブル数の前日比変化率。 |
|
avg_table_count_7d |
bigint |
7 日間の平均テーブル数。 |
|
daily_rate_atc_7d |
decimal(16,6) |
7 日間の平均テーブル数の前日比変化率。 |
|
content_size |
bigint |
収集されたストレージサイズ。ストレージサイズの収集がサポートされていない場合、この値は |
|
daily_rate_cs |
decimal(16,6) |
ストレージサイズの前日比変化率。 |
|
avg_content_size_7d |
bigint |
7 日間の平均ストレージサイズ。 |
|
daily_rate_acs_7d |
decimal(16,6) |
7 日間の平均ストレージサイズの前日比変化率。 |
|
updated_table_count |
bigint |
過去 31 日以内に更新されたテーブルの数。 |
|
daily_rate_utc |
decimal(16,6) |
過去 31 日以内に更新されたテーブル数の前日比変化率。 |
|
avg_updated_table_count_7d |
bigint |
過去 31 日以内に更新されたテーブルの 7 日間平均数。 |
|
daily_rate_autc_7d |
decimal(16,6) |
過去 31 日以内に更新されたテーブルの 7 日間平均数の前日比変化率。 |
|
accessed_table_count |
bigint |
過去 31 日以内に読み取られたテーブルの数。 |
|
daily_rate_atc |
decimal(16,6) |
過去 31 日以内に読み取られたテーブル数の前日比変化率。 |
|
avg_accessed_table_count_7d |
bigint |
過去 31 日以内に読み取られたテーブルの 7 日間平均数。 |
|
daily_rate_aatc_7d |
decimal(16,6) |
過去 31 日以内に読み取られたテーブルの 7 日間平均数の前日比変化率。 |
|
dt |
string |
日付パーティション。YYYYMMDD 形式。有効な値は [TODAY-31D, TODAY-1D] の範囲です。 |
タスクメトリック詳細 (task_metrics_detail)
|
パラメーター |
Type |
Description |
|
task_id |
bigint |
スケジューリングタスク ID。 |
|
workflow_id |
bigint |
ワークフロー ID。 |
|
node_type |
bigint |
ノードタイプ。 |
|
project_id |
bigint |
ワークスペース ID。 |
|
week_number |
bigint |
その年のビジネス日付の週番号。 |
|
task_owner |
string |
オーナー ID。 |
|
compute_resource_type |
string |
計算リソースタイプ。 |
|
compute_resource_id |
string |
計算リソースの ID。例:MaxCompute プロジェクト名、E-MapReduce (EMR) クラスター ID、Hologres インスタンス ID。 |
|
datasource_name |
string |
データソース名。 |
|
inst_success_count |
bigint |
成功したインスタンスの数。 |
|
inst_failed_count |
bigint |
失敗したインスタンスの数。 |
|
inst_running_count |
bigint |
実行中のインスタンスの数。 |
|
inst_abnormal_count |
bigint |
異常なインスタンスの数。 |
|
inst_not_started_count |
bigint |
開始されていないインスタンスの数。 |
|
inst_runtime_cu |
double |
ビジネス日付におけるタスクのインスタンスによって消費された総 CU。 |
|
task_avg_cu_31d |
double |
過去 31 日間のタスクの 1 日あたりの平均 CU 消費量。 |
|
dt |
string |
日付パーティション。YYYYMMDD 形式。有効な値は [TODAY-31D, TODAY-1D] の範囲です。 |
タスクメトリックの概要 (task_metrics_summary)
|
パラメーター |
Type |
Description |
|
node_type |
bigint |
ノードタイプ。 |
|
inst_status |
string |
インスタンスステータス。 |
|
inst_count |
bigint |
インスタンスの数。 |
|
avg_inst_count_7d |
double |
7 日間の平均インスタンス数。 |
|
granularity |
string |
統計粒度。有効な値: |
|
dt |
string |
日付パーティション。YYYYMMDD 形式。有効な値は [TODAY-31D, TODAY-1D] の範囲です。 |