DataWorks:Detail struktur tabel data terbuka

Field

Type

Description

tenant_id

string

Tenant DataWorks.

meta_entity_id

string

ID entitas metadata yang sesuai.

uuid

string

Kunci unik tabel.

meta_entity_type

string

Jenis metadata yang sesuai, seperti maxcompute-table.

entity_type

string

Jenis entitas, seperti table, view, atau materialized_view.

account_id

string

Akun Alibaba Cloud tempat aset tersebut berada.

datasource_type

string

Jenis sumber data, seperti EMR atau MaxCompute.

datasource_id

string

Nama mesin komputasi (MaxCompute: projectName, EMR: clusterId, Hologres: databaseName).

catalog_name

string

Katalog data DLF ketika metadata berasal dari DLF.

database_name

string

Nama database (EMR dbName).

schema_name

string

Nama skema.

rule_id

string

Identifier item tata kelola.

rule_name_zh

string

Nama item tata kelola dalam bahasa Tiongkok.

rule_name_en

string

Nama item tata kelola dalam bahasa Inggris.

category

string

Dimensi tempat item tersebut berada.

deduct_score_tenant

string

Pengurangan skor global, akurat hingga empat tempat desimal.

deduct_score_owner

string

Pengurangan skor individu, akurat hingga empat tempat desimal.

cost

string

Sumber daya yang terbuang.

project_id

string

Proyek DataWorks.

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD.

Field

Type

Description

tenant_id

bigint

ID tenant sumber.

meta_entity_id

string

ID entitas metadata yang sesuai.

meta_entity_type

string

Jenis metadata yang sesuai, seperti maxcompute-table.

entity_type

string

Jenis entitas, seperti table, view, atau materialized_view.

account_id

string

Akun Alibaba Cloud tempat aset tersebut berada.

datasource_type

string

Jenis sumber data, seperti EMR atau MaxCompute.

datasource_id

string

Nama mesin komputasi (MaxCompute: projectName, EMR: clusterId, Hologres: databaseName).

catalog_name

string

Katalog data DLF ketika metadata berasal dari DLF.

database_name

string

Nama database (EMR dbName).

schema_name

string

Nama skema.

uuid

string

Kunci unik tabel.

name

string

Nama tabel.

owner

string

Pemilik aset.

last_access_timestamp

bigint

Waktu terakhir tabel diakses.

meta_modified_timestamp

bigint

Timestamp 13 digit yang menunjukkan kapan metadata tabel dimodifikasi.

data_modified_timestamp

bigint

Timestamp 13 digit yang menunjukkan kapan data tabel dimodifikasi.

create_timestamp

bigint

Waktu pembuatan tabel.

comment

string

Komentar tabel.

partition_keys

string

Kunci partisi.

tags

string

Tag aset.

governance_rule_finding_count

bigint

Jumlah isu item tata kelola.

governance_rule_finding_history_count

string

Jumlah historis item tata kelola aset.

governance_health_score

string

Skor tata kelola aset.

governance_health_level

string

Tingkat skor tata kelola aset.

is_partitioned

bigint

Menunjukkan apakah tabel merupakan tabel partisi.

content_size

bigint

Ukuran logis.

record_num

bigint

Jumlah catatan.

life_cycle

string

Lifecycle.

partition_count

bigint

Jumlah partisi.

view_count_monthly

bigint

Jumlah tampilan dalam sebulan terakhir.

access_count

bigint

Jumlah akses.

upstream_table_count

bigint

Jumlah tabel hulu.

upstream_table_detail

string

Detail tabel hulu.

downstream_table_count

bigint

Jumlah tabel hilir.

downstream_table_detail

string

Detail tabel hilir.

producing_project_ids

string

Daftar ruang kerja yang terlibat dalam output tabel.

producing_tasks_count

bigint

Jumlah node yang terlibat dalam output tabel.

producing_tasks_detail

string

Detail node yang terlibat dalam output tabel.

using_tasks_count

bigint

Jumlah node yang menggunakan tabel.

using_tasks_detail

string

Detail node yang menggunakan tabel.

quality_rule_count

bigint

Jumlah aturan kualitas.

quality_monitor_count

bigint

Jumlah metrik pemantauan kualitas.

quality_rule_7_days_failed_count

bigint

Jumlah aturan kualitas yang gagal.

quality_monitor_7_days_failed_count

bigint

Jumlah metrik pemantauan kualitas yang gagal.

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD.

Field

Type

Description

tenant_id

string

ID tenant DataWorks.

node_id

string

ID node penjadwalan.

node_name

string

Nama node.

node_type

string

Jenis task: SQL, SQLCost, LOT, atau CUPID.

node_owner

string

ID dasar pemilik.

priority

string

Prioritas.

rule_id

string

Identifier item tata kelola.

rule_name_zh

string

Nama item tata kelola dalam bahasa Tiongkok.

rule_name_en

string

Nama item tata kelola dalam bahasa Inggris.

category

string

Domain tata kelola tempat item tersebut berada.

deduct_score_tenant

string

Pengurangan skor global, akurat hingga empat tempat desimal.

deduct_score_owner

string

Pengurangan skor individu, akurat hingga empat tempat desimal.

cost

string

Manfaat tata kelola.

project_id

string

ID proyek DataWorks.

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD.

Field

Type

Description

tenant_id

bigint

ID tenant sumber.

data_asset_id

string

ID aset dalam modul, sesuai dengan task.id.

name

string

Nama aset, sesuai dengan task.name.

project_id

bigint

Ruang kerja tempat aset berada.

project_env

string

Lingkungan. PROD: produksi. DEV: pengembangan.

owner

string

Pemilik aset.

create_user

string

Pembuat.

create_time

bigint

Waktu pembuatan.

modify_user

string

Pengubah.

modify_time

bigint

Waktu modifikasi.

trigger_type

string

Jenis metode pemicu. Scheduler: dipicu oleh siklus penjadwalan. Manual: dipicu secara manual.

trigger_recurrence_type

string

Normal: berjalan normal. Manual: task manual. Pause: dijeda. Skip: dry-run.

trigger_cron

string

Ekspresi cron.

type

bigint

Jenis kode eksekusi. Untuk informasi lebih lanjut, lihat kode jenis node dalam Pengembangan Node.

script_parameters

string

Informasi parameter.

priority

bigint

Prioritas task. Nilainya berkisar dari 1 hingga 8. Nilai yang lebih besar menunjukkan prioritas yang lebih tinggi. Prioritas default adalah 1.

trigger_start_time

bigint

Tanggal mulai penjadwalan.

trigger_end_time

bigint

Tanggal akhir penjadwalan.

runtime_resource_group_id

bigint

ID kelompok sumber daya tempat node berada.

runtime_cu

string

CUs komputasi.

baseline_id

bigint

ID baseline tempat node berada.

rerun_times

bigint

Jumlah kali task dapat dijalankan ulang.

rerun_interval

bigint

Interval jalankan ulang dalam milidetik.

rerun_mode_type

string

AllAllowed: Jalankan ulang diperbolehkan baik saat gagal maupun sukses. FailureAllowed: Jalankan ulang hanya diperbolehkan saat gagal. AllDenied: Jalankan ulang tidak diperbolehkan baik saat gagal maupun sukses.

tags

string

Tag aset.

tags_count

bigint

Jumlah tag aset.

input_table_count

bigint

Jumlah tabel input.

output_table_count

bigint

Jumlah tabel output.

input_table_detail

string

Detail tabel input.

output_table_detail

string

Detail tabel output.

upstream_node_count

bigint

Jumlah node hulu.

downstream_node_count

bigint

Jumlah node hilir.

governance_rule_finding_count

bigint

Jumlah isu item tata kelola.

governance_rule_finding_history_count

string

Jumlah historis item tata kelola aset.

governance_health_score

string

Skor aset.

governance_health_level

string

Tingkat skor aset.

engine_datasource_id

string

ID mesin komputasi.

engine_instance_count

bigint

Jumlah pekerjaan mesin komputasi.

engine_instance_run_time

bigint

Waktu proses pekerjaan mesin komputasi.

engine_instance_comput_volume_cost

string

Volume komputasi.

engine_instance_cu_cost

string

CUs komputasi.

engine_instance_cpu_cost

string

Konsumsi CPU.

engine_instance_mem_cost

string

Konsumsi memori.

engine_instance_exist_data_skew

bigint

Kesenjangan data.

engine_instance_suggestions

string

Saran untuk kesenjangan data.

engine_instance_data_skew_ids

string

ID pekerjaan dengan kesenjangan data.

engine_instance_ids

string

ID pekerjaan.

task_instance_wait_time_cost_sum

bigint

Total waktu tunggu.

task_instance_wait_time_cost_max

bigint

Waktu tunggu maksimum instans.

task_instance_run_time_cost_sum

bigint

Total waktu proses.

task_instance_run_time_cost_max

bigint

Waktu proses maksimum.

task_instance_7_days_wait_time_cost_max

bigint

Waktu tunggu maksimum instans dalam 7 hari terakhir.

task_instance_7_days_run_time_cost_max

bigint

Waktu proses maksimum instans dalam 7 hari terakhir.

task_instance_count

bigint

Jumlah instans.

task_instance_7_days_failed_count

bigint

Jumlah instans yang gagal.

task_instance_7_days_failed_day_count

bigint

Jumlah hari dengan kegagalan.

task_instance_7_days_frezeed_day_count

bigint

Jumlah hari dibekukan.

task_instance_7_days_dry_run_day_count

bigint

Jumlah hari dengan dry-run.

quality_monitor_count

bigint

Jumlah metrik pemantauan Kualitas Data.

quality_monitor_7_days_failed_count

bigint

Jumlah metrik pemantauan Kualitas Data yang gagal.

di_task_resource_group_id

string

ID kelompok sumber daya integrasi data tempat node berada.

di_task_is_public_network

bigint

Menunjukkan apakah task integrasi data menggunakan lalu lintas internet.

di_task_concurrency

bigint

Konkurensi.

di_task_total_records

bigint

Jumlah catatan yang disinkronkan.

di_task_total_bytes

bigint

Volume data yang disinkronkan.

di_task_source_type

string

Jenis sumber.

di_task_target_type

string

Jenis target.

di_task_run_time_cost

bigint

Durasi eksekusi tugas integrasi data.

di_task_wait_time_cost

bigint

Waktu tunggu task integrasi data.

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD.

Field

Type

Description

id

bigint

ID kunci utama.

scan_run_id

bigint

ID instans pemantauan kualitas.

rule_id

bigint

ID aturan.

rule_name

string

Nama aturan.

status

string

Hasil pemeriksaan aturan: Pass, Error, Warn, Fail, atau Running.

severity

string

Tingkat keparahan aturan: High atau Normal.

create_time

bigint

Waktu pembuatan.

modify_time

bigint

Waktu modifikasi terakhir.

spec

string

Spesifikasi instans aturan.

tags

array<string>

Tag instans aturan.

tenant_id

bigint

ID tenant DataWorks.

project_id

bigint

ID proyek DataWorks.

meta_entity_id

string

Identifier unik entitas tabel Peta Data.

dt

string

Partisi tanggal dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari D hari yang lalu hingga kemarin.

Field

Type

Description

id

bigint

ID kunci utama.

scan_id

bigint

ID pemantauan kualitas.

rule_name

string

Nama aturan.

enabled

boolean

Menunjukkan apakah aturan diaktifkan.

severity

string

Tingkat keparahan bisnis aturan. Nilai enumerasi: High, Normal.

create_time

bigint

Waktu pembuatan.

modify_time

bigint

Waktu modifikasi terakhir.

spec

string

Spesifikasi aturan.

tags

array<string>

Tag aturan.

tenant_id

bigint

ID tenant DataWorks.

project_id

bigint

ID proyek DataWorks.

meta_entity_id

string

Identifier unik entitas Peta Data.

pass_count

int

Jumlah kali pemeriksaan aturan lolos.

warn_count

int

Jumlah kali pemeriksaan aturan memicu ambang peringatan.

error_count

int

Jumlah kali pemeriksaan aturan memicu ambang kesalahan.

fail_count

int

Jumlah kali pemeriksaan aturan gagal.

dt

string

Partisi tanggal dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari D hari yang lalu hingga kemarin.

Field

Type

Description

id

bigint

ID kunci utama.

scan_id

bigint

ID pemantauan kualitas.

name

string

Nama pemantauan.

status

string

Status instans pemantauan: Pass, Warn, Error, Fail, atau Running.

post_action_type

string

Aksi yang diambil setelah pemeriksaan pemantauan. Nilai enumerasi: Alert atau BlockTaskInstance.

data_filter

string

Cakupan data yang benar-benar digunakan untuk pengambilan sampel.

trigger_time

bigint

Waktu terjadwal yang digunakan oleh task.

trigger_type

string

Metode pemicu untuk pemantauan Kualitas Data: ByManual, BySchedule, atau ByQualityNode.

create_time

bigint

Waktu pembuatan.

modify_time

bigint

Waktu pembaruan terakhir.

datasource_id

bigint

ID sumber data tempat tabel berada.

datasource_type

string

Jenis sumber data.

computing_resource_id

bigint

ID mesin komputasi.

compute_resource_option

string

Sumber daya komputasi yang digunakan untuk menjalankan pemantauan Kualitas Data.

spec

string

Spesifikasi pemantauan kualitas.

tenant_id

bigint

ID tenant DataWorks.

project_id

bigint

ID proyek DataWorks.

owner

string

Pemilik task pemantauan kualitas.

task_id

bigint

ID task penjadwalan.

task_instance_id

bigint

ID instans task penjadwalan.

meta_entity_id

string

Identifier unik entitas Peta Data.

table_name

string

Nama tabel.

catalog_name

string

Nama katalog data tempat tabel berada.

schema_name

string

Nama skema tempat tabel berada.

database_name

string

Nama database tempat tabel berada.

cluster_id

string

ID kluster tempat tabel berada.

dt

string

Partisi tanggal dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari D hari yang lalu hingga kemarin.

Field

Type

Description

id

bigint

ID kunci utama.

name

string

Nama pemantauan.

data_filter_type

string

Jenis cakupan data: ByPartition atau ByWhere.

data_filter

string

Ekspresi cakupan data.

trigger_type

string

Metode pemicu untuk pemantauan Kualitas Data: ByManual, BySchedule, atau ByQualityNode.

create_time

bigint

Waktu pembuatan.

modify_time

bigint

Waktu pembaruan terakhir.

computing_resource_id

bigint

ID mesin komputasi.

compute_resource_option

string

Sumber daya komputasi yang digunakan untuk menjalankan pemantauan Kualitas Data.

spec

string

Spesifikasi pemantauan Kualitas Data.

related_tasks

array<bigint>

Task penjadwalan yang terkait dengan task pemantauan.

tenant_id

bigint

ID tenant DataWorks.

project_id

bigint

ID proyek DataWorks.

owner

string

Pemilik task pemantauan kualitas.

datasource_id

string

ID sumber data tempat tabel berada.

datasource_type

string

Jenis sumber data.

meta_entity_id

string

Identifier unik entitas Peta Data.

table_name

string

Nama tabel.

catalog_name

string

Nama katalog data tempat tabel berada.

schema_name

string

Nama skema tempat tabel berada.

database_name

string

Nama database tempat tabel berada.

cluster_id

string

ID kluster tempat tabel berada.

related_scheduler_task_count

int

Jumlah task penjadwalan terkait.

rule_count

int

Jumlah aturan terkait.

high_severity_rule_count

int

Jumlah aturan kuat terkait.

normal_severity_rule_count

int

Jumlah aturan lemah terkait.

enabled_rule_count

int

Jumlah aturan yang diaktifkan.

enabled_high_severity_rule_count

int

Jumlah aturan kuat yang diaktifkan.

enabled_normal_severity_rule_count

int

Jumlah aturan lemah yang diaktifkan.

rule_instance_count

int

Jumlah instans aturan hari ini.

high_severity_rule_instance_count

int

Jumlah instans aturan kuat hari ini.

normal_severity_rule_instance_count

int

Jumlah instans aturan lemah hari ini.

high_severity_rule_instance_pass_count

int

Jumlah instans aturan kuat yang lolos hari ini.

high_severity_rule_instance_warn_count

int

Jumlah instans aturan kuat dengan peringatan hari ini.

high_severity_rule_instance_error_count

int

Jumlah instans aturan kuat dengan kesalahan hari ini.

high_severity_rule_instance_fail_count

int

Jumlah instans aturan kuat yang gagal hari ini.

normal_severity_rule_instance_pass_count

int

Jumlah instans aturan lemah yang lolos hari ini.

normal_severity_rule_instance_warn_count

int

Jumlah instans aturan lemah dengan peringatan hari ini.

normal_severity_rule_instance_error_count

int

Jumlah instans aturan lemah dengan kesalahan hari ini.

normal_severity_rule_instance_fail_count

int

Jumlah instans aturan lemah yang gagal hari ini.

block_task_instance_count

int

Jumlah task penjadwalan yang diblokir hari ini.

alert_rule_count

int

Jumlah langganan peringatan yang dikonfigurasi.

sms_alert_rule_count

int

Jumlah langganan peringatan pesan teks yang dikonfigurasi.

mail_alert_rule_count

int

Jumlah langganan peringatan email yang dikonfigurasi.

phone_alert_rule_count

int

Jumlah langganan peringatan panggilan telepon yang dikonfigurasi.

ding_alert_rule_count

int

Jumlah langganan peringatan DingTalk yang dikonfigurasi.

feishu_alert_rule_count

int

Jumlah langganan peringatan Lark yang dikonfigurasi.

weixin_alert_rule_count

int

Jumlah langganan peringatan WeChat yang dikonfigurasi.

webhook_alert_rule_count

int

Jumlah langganan peringatan webhook kustom yang dikonfigurasi.

alert_times

int

Jumlah peringatan yang dipicu hari ini.

sms_alert_times

int

Jumlah peringatan pesan teks yang dipicu hari ini.

mail_alert_times

int

Jumlah peringatan email yang dipicu hari ini.

phone_alert_times

int

Jumlah peringatan panggilan telepon yang dipicu hari ini.

ding_alert_times

int

Jumlah peringatan DingTalk yang dipicu hari ini.

feishu_alert_times

int

Jumlah peringatan Lark yang dipicu hari ini.

weixin_alert_times

int

Jumlah peringatan WeChat yang dipicu hari ini.

webhook_alert_times

int

Jumlah peringatan webhook kustom yang dipicu hari ini.

dt

string

Partisi tanggal dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari D hari yang lalu hingga kemarin.

Field

Type

Description

meta_entity_id

string

Identifier unik entitas tabel Peta Data.

project_id

bigint

ID proyek DataWorks.

table_name

string

Nama tabel.

schema_name

string

Nama skema tempat tabel berada.

database_name

string

Nama database tempat tabel berada.

catalog_name

string

Nama katalog data tempat tabel berada.

datasource_id

bigint

ID sumber data tempat tabel berada. Ini bernilai NULL jika Kualitas Data tidak dikonfigurasi.

tenant_id

bigint

ID tenant DataWorks.

owner

string

Pemilik tabel.

scan_count

int

Jumlah task pemantauan kualitas yang dikonfigurasi.

scheduler_related_scan_count

int

Jumlah task pemantauan kualitas yang terkait dengan penjadwalan.

scan_run_count

int

Jumlah instans task pemantauan kualitas hari ini.

alert_scan_run_count

int

Jumlah instans task pemantauan kualitas yang memicu peringatan hari ini.

block_task_instance_scan_run_count

int

Jumlah instans task pemantauan kualitas yang memblokir task penjadwalan hari ini.

rule_count

int

Jumlah aturan yang dikonfigurasi.

enabled_rule_count

int

Jumlah aturan yang diaktifkan.

high_severity_rule_count

int

Jumlah aturan kuat yang dikonfigurasi.

normal_severity_rule_count

int

Jumlah aturan lemah yang dikonfigurasi.

rule_instance_count

int

Jumlah instans aturan hari ini.

high_severity_rule_instance_count

int

Jumlah instans aturan kuat hari ini.

normal_severity_rule_instance_count

int

Jumlah instans aturan lemah hari ini.

high_severity_rule_instance_pass_count

int

Jumlah kali pemeriksaan aturan kuat lolos hari ini.

high_severity_rule_instance_warn_count

int

Jumlah kali pemeriksaan aturan kuat menghasilkan peringatan hari ini.

high_severity_rule_instance_error_count

int

Jumlah kali pemeriksaan aturan kuat menghasilkan kesalahan hari ini.

high_severity_rule_instance_fail_count

int

Jumlah kali pemeriksaan aturan kuat gagal hari ini.

normal_severity_rule_instance_pass_count

int

Jumlah kali pemeriksaan aturan lemah lolos hari ini.

normal_severity_rule_instance_warn_count

int

Jumlah kali pemeriksaan aturan lemah menghasilkan peringatan hari ini.

normal_severity_rule_instance_error_count

int

Jumlah kali pemeriksaan aturan lemah menghasilkan kesalahan hari ini.

normal_severity_rule_instance_fail_count

int

Jumlah kali pemeriksaan aturan lemah gagal hari ini.

dt

string

Partisi tanggal dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

datasource_type

string

Jenis sumber data, seperti dlf atau starrocks.

datasource_id

string

Identifier sumber data, seperti ID kluster StarRocks atau ID Akun Alibaba Cloud tempat DLF berada.

name

string

Nama katalog data.

type

string

Jenis katalog data, seperti Hive atau Jdbc.

comment

string

Komentar katalog data.

location

string

Jalur direktori.

properties

string

Properti dan parameter (string JSON).

owner

string

Pemilik katalog data. Nilainya dapat berupa UID Akun Alibaba Cloud atau akun sistem database, tergantung pada jenis sumber data.

create_timestamp

bigint

Timestamp pembuatan 13 digit.

update_timestamp

bigint

Timestamp modifikasi 13 digit.

meta_entity_id

string

Identifier unik katalog data (ramah API dan sesuai dengan spesifikasi ID entitas metadata).

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

datasource_type

string

Jenis sumber data, seperti dlf, starrocks, maxcompute, holodb, atau mysql.

datasource_id

string

Identifier sumber data, seperti ID kluster StarRocks, ID Akun Alibaba Cloud tempat DLF atau MaxCompute berada, atau ID instans RDS.

catalog_name

string

Nama katalog data. Field ini memiliki nilai jika jenis sumber data mendukung katalog data.

name

string

Nama database.

type

string

Jenis database.

comment

string

Komentar database.

location

string

Jalur database.

properties

string

Properti dan parameter (string JSON).

owner

string

Pemilik database. Nilainya dapat berupa UID Akun Alibaba Cloud atau akun sistem database, tergantung pada jenis sumber data.

is_external

boolean

Menunjukkan apakah database merupakan database eksternal.

create_timestamp

bigint

Timestamp pembuatan 13 digit.

update_timestamp

bigint

Timestamp modifikasi 13 digit.

meta_entity_id

string

Identifier unik database (ramah API dan sesuai dengan spesifikasi ID entitas metadata).

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

datasource_type

string

Jenis sumber data, seperti holodb, maxcompute, atau postgresql.

datasource_id

string

Identifier sumber data, seperti ID instans RDS atau ID Akun Alibaba Cloud tempat MaxCompute berada.

catalog_name

string

Nama katalog data. Field ini memiliki nilai jika jenis sumber data mendukung katalog data.

database_name

string

Nama database.

name

string

Nama skema.

type

string

Jenis skema.

comment

string

Komentar.

properties

string

Properti dan parameter (string JSON).

owner

string

Pemilik skema. Nilainya dapat berupa UID Akun Alibaba Cloud atau akun sistem database, tergantung pada jenis sumber data.

create_timestamp

bigint

Timestamp pembuatan 13 digit.

update_timestamp

bigint

Timestamp modifikasi 13 digit.

meta_entity_id

string

Identifier unik skema (ramah API dan sesuai dengan spesifikasi ID entitas metadata).

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

datasource_type

string

Jenis sumber data, seperti dlf, starrocks, maxcompute, holodb, atau mysql.

datasource_id

string

Identifier sumber data, seperti ID kluster StarRocks, ID Akun Alibaba Cloud tempat DLF atau MaxCompute berada, atau ID instans RDS.

catalog_name

string

Nama katalog data. Field ini memiliki nilai jika jenis sumber data mendukung katalog data.

database_name

string

Nama database.

schema_name

string

Nama skema. Field ini memiliki nilai jika jenis sumber data mendukung skema.

name

string

Nama tabel.

type

string

Jenis tabel.

comment

string

Komentar.

partition_keys

string

Kunci partisi. Untuk partisi multi-level, field dipisahkan dengan koma (,).

location

string

Jalur penyimpanan tabel.

properties

string

Properti dan parameter (string JSON). Untuk view, ini adalah DDL definisi view.

owner

string

Pemilik tabel. Nilainya dapat berupa UID Akun Alibaba Cloud atau akun sistem database, tergantung pada jenis sumber data.

content_size

bigint

Ukuran penyimpanan dalam byte.

data_retention

map<string,string>

Periode retensi data atau lifecycle. Nilainya bervariasi berdasarkan jenis tabel. Untuk tabel MaxCompute, kuncinya adalah `lifecycle` dan nilainya adalah lifecycle tabel, seperti 365. Untuk tabel DLF, kuncinya adalah `retention` dan nilainya adalah lifecycle tabel, seperti 91. Belum didukung untuk jenis lain. Dokumen ini akan diperbarui jika dukungan ditambahkan.

is_compressed

boolean

Menunjukkan apakah data dikompresi.

is_temporary

boolean

Menunjukkan apakah tabel merupakan tabel temporary.

entity_type

string

Jenis entitas, seperti table, view, atau materialized_view.

input_format

string

Format input.

output_format

string

Format output.

serde_parameters

string

Parameter SerDe.

serialization_lib

string

Pustaka serialisasi.

create_timestamp

bigint

Timestamp pembuatan tabel 13 digit.

meta_modified_timestamp

bigint

Timestamp 13 digit yang menunjukkan kapan metadata tabel dimodifikasi.

data_modified_timestamp

bigint

Timestamp 13 digit yang menunjukkan kapan data tabel dimodifikasi.

last_access_timestamp

bigint

Timestamp 13 digit yang menunjukkan kapan tabel terakhir diakses.

business_description

string

Deskripsi bisnis atau nama Tiongkok.

meta_entity_id

string

Identifier unik tabel (ramah API dan sesuai dengan spesifikasi ID entitas metadata).

Contoh:

• maxcompute-table: ID Akun Alibaba Cloud::nama_proyek:nama_skema:nama_tabel.

• holo-table: ID instans Hologres::database_sampel:skema_publik:nama_tabel.

• starrocks-table: ID instans kluster: default_catalog:sample_database::sample_table.

uuid

string

UUID tabel, digunakan untuk menautkan ke halaman detail tabel Peta Data DataWorks.

business_tags

array<string>

Tag bisnis. Tag yang diatur pada halaman Peta Data dicatat di field ini.

wikis

array<struct<`version`:bigint,`operator`:string,`update_timestamp`:bigint,`content`:string>>

Petunjuk penggunaan tabel (version: nomor versi; operator: pengirim; update_timestamp: timestamp pembaruan 13 digit; content: konten).

producing_tasks

array<bigint>

Daftar ID task penjadwalan yang menghasilkan data untuk tabel. Untuk informasi lebih lanjut, lihat tabel tasks.

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

datasource_type

string

Jenis sumber data, seperti dlf atau starrocks.

datasource_id

string

Identifier sumber data, seperti ID kluster StarRocks, ID Akun Alibaba Cloud tempat DLF atau MaxCompute berada, atau ID instans RDS.

catalog_name

string

Nama katalog data. Field ini memiliki nilai jika jenis sumber data mendukung katalog data.

database_name

string

Nama database.

schema_name

string

Nama skema. Field ini memiliki nilai jika jenis sumber data mendukung skema.

table_name

string

Nama tabel.

name

string

Nama field.

type

string

Jenis field.

comment

string

Komentar.

ordinal_position

bigint

Posisi ordinal field, dimulai dari 1.

is_primary_key

boolean

Menunjukkan apakah field merupakan primary key.

is_nullable

boolean

Menunjukkan apakah field dapat bernilai NULL.

is_partition_key

boolean

Menunjukkan apakah field merupakan kunci partisi.

properties

string

Properti dan parameter (string JSON).

business_description

string

Deskripsi bisnis.

meta_entity_id

string

Identifier unik field (ramah API dan sesuai dengan spesifikasi ID entitas metadata).

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

datasource_type

string

Jenis sumber data, seperti maxcompute, dlf, atau starrocks.

datasource_id

string

Identifier sumber data, seperti ID kluster StarRocks, ID Akun Alibaba Cloud tempat DLF atau MaxCompute berada, atau ID instans RDS.

catalog_name

string

Nama katalog data. Field ini memiliki nilai jika jenis sumber data mendukung katalog data.

database_name

string

Nama database.

schema_name

string

Nama skema. Field ini memiliki nilai jika jenis sumber data mendukung skema.

table_name

string

Nama tabel.

name

string

Nama partisi (spesifikasi partisi).

create_timestamp

bigint

Timestamp pembuatan 13 digit.

update_timestamp

bigint

Timestamp modifikasi 13 digit.

content_size

bigint

Ukuran partisi dalam byte.

properties

string

Properti dan parameter (string JSON).

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

source_meta_entity_id

string

Identifier unik sumber (ramah API dan sesuai dengan spesifikasi ID entitas metadata).

source_raw_entity_type

string

Jenis entitas sumber. Jika metadata yang diidentifikasi tidak dikelola, source_meta_entity_type kosong dan source_raw_entity_type digunakan sebagai identifier.

source_uuid

string

Identifier unik sumber (ramah akses halaman).

target_meta_entity_id

string

Identifier unik target (ramah API dan sesuai dengan spesifikasi ID entitas metadata).

target_raw_entity_type

string

Jenis entitas target. Jika metadata yang diidentifikasi tidak dikelola, target_meta_entity_type kosong dan target_raw_entity_type digunakan sebagai identifier.

target_uuid

string

Identifier unik target (ramah akses halaman).

compute_engine

string

Mesin komputasi, seperti maxcompute, datax, atau hologres.

transform_type

string

Jenis task transformasi dalam engine, seperti SQL, DATAX, DATAX_STREAM, EXTERNAL_TABLE_MAPPING, STORAGE_MAPPING, atau API_MAPPING.

task_id

bigint

ID task penjadwalan DataWorks. Untuk informasi lebih lanjut, lihat tabel tasks. Field ini kosong untuk data lineage yang tidak dipicu oleh penjadwalan DataWorks.

task_instance_id

bigint

ID instans task penjadwalan DataWorks. Untuk informasi lebih lanjut, lihat tabel tasks_instances. Field ini kosong untuk data lineage yang tidak dipicu oleh penjadwalan DataWorks.

lineage_time

bigint

Waktu saat lineage dihasilkan, dalam milidetik.

granularity

string

Tingkat lineage, seperti TABLE atau COLUMN.

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

id

bigint

ID task.

name

string

Nama task.

description

string

Deskripsi task.

type

bigint

Jenis task. Untuk informasi lebih lanjut, lihat kode jenis node dalam Pengembangan Node.

workflow_id

bigint

ID alur kerja.

instance_mode

string

Mode pembuatan instans.

• T+1 (dibuat hari berikutnya)

• Segera (dibuat segera)

baseline_id

bigint

ID baseline.

priority

bigint

Prioritas task. Nilainya berkisar dari 1 hingga 8. Nilai yang lebih besar menunjukkan prioritas yang lebih tinggi. Prioritas default adalah 1.

timeout

bigint

Periode timeout eksekusi task dalam jam.

rerun_mode

bigint

Konfigurasi jalankan ulang. 0: Jalankan ulang hanya diperbolehkan saat gagal. 1: Jalankan ulang diperbolehkan saat gagal maupun sukses. 2: Jalankan ulang tidak diperbolehkan saat gagal maupun sukses.

rerun_times

bigint

Jumlah percobaan ulang. Ini berlaku ketika task dikonfigurasi agar dapat dijalankan ulang.

rerun_interval

bigint

Interval percobaan ulang dalam detik.

script_parameters

string

Daftar parameter skrip runtime.

trigger_type

string

Jenis metode pemicu (Scheduler: dipicu oleh siklus penjadwalan; Manual: dipicu secara manual).

trigger_recurrence

bigint

Mode berjalan saat dipicu. 0: Normal. 1: Task manual. 2: Dijeda. 3: Dry-run. 4: Task referensi.

trigger_cron

string

Ekspresi cron. Ini berlaku ketika type diatur ke Scheduler.

trigger_start_time

string

Waktu efektif untuk pemicu periodik. Ini berlaku ketika type diatur ke Scheduler.

trigger_end_time

string

Waktu kedaluwarsa untuk pemicu periodik. Ini berlaku ketika type diatur ke Scheduler.

runtime_resource_group_id

bigint

ID kelompok sumber daya untuk menjalankan task.

runtime_image

string

ID citra runtime yang dikonfigurasi untuk task.

runtime_cu

string

Konsumsi CU yang dikonfigurasi untuk task.

datasource_name

string

Nama sumber data.

inputs_variables

array<struct<`name`:string,`type`:string,`value`:string>>

Daftar variabel input.

outputs

array<struct<`output`:string,`type`:string>>

Daftar identifier output task.

outputs_variables

array<struct<`name`:string,`type`:string,`value`:string>>

Daftar variabel output.

dependencies

array<struct<`type`:string,`upstream_output`:string,`upstream_node_id`:bigint>>

Daftar informasi dependensi.

related_workflow_id

bigint

ID alur kerja terkait.

tags

array<struct<`key`:string,`value`:string>>

Daftar tag task.

project_id

bigint

ID proyek. Untuk informasi lebih lanjut, lihat field workspace_id dalam tabel workspaces.

project_env

string

Jenis lingkungan (PROD: produksi; DEV: pengembangan).

owner

string

ID akun pemilik task. Untuk informasi lebih lanjut, lihat tabel users.

create_time

string

Waktu pembuatan.

modify_time

string

Waktu modifikasi.

create_user

string

ID akun pembuat. Untuk informasi lebih lanjut, lihat tabel users.

modify_user

string

ID akun pengubah. Untuk informasi lebih lanjut, lihat tabel users.

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

id

bigint

ID instans task.

node_id

bigint

ID task. Untuk informasi lebih lanjut, lihat tabel tasks.

node_type

bigint

Jenis task. Untuk informasi lebih lanjut, lihat kode jenis node dalam Pengembangan Node.

node_name

string

Nama tugas.

description

string

Deskripsi task.

workflow_id

bigint

ID alur kerja. Untuk informasi lebih lanjut, lihat tabel tasks.

workflow_name

string

Nama alur kerja.

workflow_instance_id

bigint

ID instans alur kerja.

workflow_instance_type

bigint

Jenis instans alur kerja. 0: Penjadwalan harian. 1: Task manual. 2: Pengujian asap. 3: Pengisian data mundur. 4: Alur kerja sekali pakai. 5: Alur kerja manual.

trigger_type

string

Jenis metode pemicu (Scheduler/Manual).

trigger_recurrence

string

Mode berjalan. 0: Normal. 1: Manual. 2: Dijeda. 3: Dry-run. 4: Referensi.

timeout

bigint

Periode timeout eksekusi task dalam jam.

rerun_mode

string

Konfigurasi jalankan ulang. 0: Jalankan ulang hanya saat gagal. 1: Jalankan ulang saat sukses atau gagal. 2: Jalankan ulang tidak diperbolehkan.

run_number

bigint

Jumlah kali dijalankan.

period_number

bigint

Nomor ordinal epoch.

baseline_id

bigint

ID baseline.

priority

bigint

Prioritas task (1-8).

script_parameters

string

Daftar parameter skrip runtime.

runtime_resource_group_id

bigint

ID kelompok sumber daya untuk menjalankan task.

runtime_resource_group_identifier

string

Nama identifier kelompok sumber daya untuk menjalankan task.

runtime_image

string

ID citra runtime.

runtime_cu

string

Konsumsi CU runtime.

runtime_process_id

string

ID proses runtime.

runtime_gateway

string

Gerbang runtime.

datasource_name

string

Nama sumber data.

inputs_variables

array<struct<`name`:string,`type`:string,`value`:string>>

Daftar variabel input.

outputs

array<struct<`output`:string,`type`:string>>

Daftar identifier output.

outputs_variables

array<struct<`name`:string,`type`:string,`value`:string>>

Daftar variabel output.

tags

array<struct<`key`:string,`value`:string>>

Daftar tag task.

status

bigint

Status task. 1: Belum dijalankan. 2: Menunggu waktu. 3: Menunggu sumber daya. 4: Berjalan. 5: Gagal. 6: Berhasil. 7: Memverifikasi. 8: Pemeriksaan kondisi. 9: Menunggu pemicu.

trigger_time

string

Waktu pemicu.

bizdate

string

Waktu data.

started_time

string

Waktu mulai.

finished_time

string

Waktu selesai.

project_id

bigint

ID proyek. Untuk informasi lebih lanjut, lihat field workspace_id dalam tabel workspaces.

project_env

string

Jenis lingkungan (PROD/DEV).

owner

string

ID akun pemilik. Untuk informasi lebih lanjut, lihat tabel users.

create_time

string

Waktu pembuatan.

modify_time

string

Waktu modifikasi.

create_user

string

ID akun pembuat. Untuk informasi lebih lanjut, lihat tabel users.

modify_user

string

ID akun pengubah. Untuk informasi lebih lanjut, lihat tabel users.

waiting_resource_time

string

Waktu menunggu sumber daya.

waiting_trigger_time

string

Waktu menunggu pemicu.

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

user_id

string

Identifier pengguna.

user_nick

string

Alias akun (nama tampilan).

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

workspace_id

bigint

ID ruang kerja.

workspace_name

string

Nama ruang kerja.

workspace_identifier

string

Identifier ruang kerja.

workspace_description

string

Deskripsi ruang kerja.

workspace_owner

string

Identifier pemilik ruang kerja. Untuk informasi lebih lanjut, lihat tabel users.

workspace_status

bigint

Status ruang kerja. 0: Normal. 1: Dihapus. 2: Inisialisasi. 3: Inisialisasi gagal. 4: Dinonaktifkan secara manual. 5: Menghapus. 6: Penghapusan gagal. 7: Dibekukan karena pembayaran tertunda.

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

workspace_id

bigint

ID ruang kerja. Untuk informasi lebih lanjut, lihat tabel workspaces.

user_id

string

Identifier pengguna. Untuk informasi lebih lanjut, lihat tabel users.

user_status

bigint

Status pengguna. 0: Normal. 1: Dinonaktifkan. 2: Dihapus.

gmt_create_ts

bigint

Waktu pembuatan (timestamp 13 digit).

gmt_modified_ts

bigint

Waktu modifikasi (timestamp 13 digit).

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

resource_group_id

bigint

ID kelompok sumber daya.

resource_group_identifier

string

Identifier kelompok sumber daya.

resource_group_type

bigint

Jenis kelompok sumber daya. 1: Kelompok sumber daya jadwal. 2: Kelompok sumber daya MaxCompute. 4: Kelompok sumber daya integrasi data.

resource_group_mode

bigint

Mode kelompok sumber daya. 1: Langganan. 2: Pay-as-you-go. 3: Edisi pengembang (hanya MaxCompute).

resource_group_status

bigint

Status kelompok sumber daya. 0: Normal. 1: Dibekukan. 2: Dihapus. 3: Membuat. 4: Pembuatan gagal. 5: Memperbarui. 6: Pembaruan gagal. 7: Menghapus. 8: Penghapusan gagal.

is_exclusive_resource_group

boolean

Menunjukkan apakah kelompok sumber daya eksklusif.

dt

string

Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

datasource_type

string

Jenis sumber data.

datasource_id

string

Identifier sumber data.

catalog_name

string

Nama katalog data.

database_name

string

Nama database.

schema_name

string

Nama skema.

table_name

string

Nama tabel.

table_uuid

string

Identifier tabel, digunakan untuk menautkan ke halaman detail.

meta_entity_id

string

Identifier tabel, sangat mudah dibaca.

content_size

bigint

Volume penyimpanan yang dikumpulkan. Nilainya NULL jika pengumpulan volume penyimpanan tidak didukung.

daily_rate_cs

decimal(16,6)

Tingkat perubahan harian volume penyimpanan.

avg_content_size_7d

bigint

Rata-rata 7 hari volume penyimpanan.

daily_rate_acs_7d

decimal(16,6)

Tingkat perubahan harian rata-rata 7 hari volume penyimpanan.

latest_data_update_time_31d

bigint

Waktu akhir instans yang sesuai sebagai lineage hilir dalam rentang data 31 hari. Nilai maksimum dari data_modified_timestamp. Nilainya NULL jika tidak ada pembaruan dalam rentang 31 hari.

latest_data_update_task_id

bigint

ID task penjadwalan yang paling baru memperbarui tabel dalam 31 hari.

latest_data_update_instance_id

bigint

ID instans task penjadwalan yang paling baru memperbarui tabel dalam 31 hari.

latest_data_update_time_by_task

bigint

Waktu akhir instans task penjadwalan yang paling baru memperbarui tabel dalam 31 hari.

writing_task_ids

array<bigint>

ID task penjadwalan yang menulis ke tabel untuk timestamp data saat ini (tanpa ID duplikat).

writing_task_ids_31d

array<bigint>

ID task penjadwalan yang menulis ke tabel dalam rentang data 31 hari (tanpa ID duplikat).

latest_data_access_time_31d

bigint

Waktu akhir instans yang sesuai sebagai lineage hulu dalam rentang data 31 hari. Nilai maksimum dari last_access_timestamp. Nilainya NULL jika tidak ada akses dalam rentang 31 hari.

latest_data_access_task_id

bigint

ID task penjadwalan yang paling baru membaca tabel dalam 31 hari.

latest_data_access_instance_id

bigint

ID instans task penjadwalan yang paling baru membaca tabel dalam 31 hari.

latest_data_access_time_by_task

bigint

Waktu akhir instans yang sesuai sebagai lineage hulu dalam rentang data 31 hari.

reading_task_ids

array<string>

ID task penjadwalan yang membaca tabel.

reading_task_ids_31d

array<string>

ID task penjadwalan yang membaca tabel dalam rentang data 31 hari (tanpa ID duplikat).

direct_downstream_tables

array<string>

ID tabel anak (uuid).

direct_upstream_tables

array<string>

ID tabel induk (uuid).

dt

string

Partisi tanggal dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

table_count

bigint

Jumlah tabel.

daily_rate_tc

decimal(16,6)

Tingkat perubahan harian jumlah tabel.

avg_table_count_7d

bigint

Rata-rata 7 hari jumlah tabel.

daily_rate_atc_7d

decimal(16,6)

Tingkat perubahan harian rata-rata 7 hari jumlah tabel.

content_size

bigint

Volume penyimpanan yang dikumpulkan. Nilainya NULL jika pengumpulan volume penyimpanan tidak didukung.

daily_rate_cs

decimal(16,6)

Tingkat perubahan harian volume penyimpanan.

avg_content_size_7d

bigint

Rata-rata 7 hari volume penyimpanan.

daily_rate_acs_7d

decimal(16,6)

Tingkat perubahan harian rata-rata 7 hari volume penyimpanan.

updated_table_count

bigint

Jumlah tabel yang diperbarui dalam 31 hari.

daily_rate_utc

decimal(16,6)

Tingkat perubahan harian jumlah tabel yang diperbarui dalam 31 hari.

avg_updated_table_count_7d

bigint

Rata-rata 7 hari jumlah tabel yang diperbarui dalam 31 hari.

daily_rate_autc_7d

decimal(16,6)

Tingkat perubahan harian rata-rata 7 hari jumlah tabel yang diperbarui dalam 31 hari.

accessed_table_count

bigint

Jumlah tabel yang dibaca dalam 31 hari.

daily_rate_atc

decimal(16,6)

Tingkat perubahan harian jumlah tabel yang dibaca dalam 31 hari.

avg_accessed_table_count_7d

bigint

Rata-rata 7 hari jumlah tabel yang dibaca dalam 31 hari.

daily_rate_aatc_7d

decimal(16,6)

Tingkat perubahan harian rata-rata 7 hari jumlah tabel yang dibaca dalam 31 hari.

dt

string

Partisi tanggal dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

task_id

bigint

Identifier task.

workflow_id

bigint

Identifier alur kerja.

node_type

bigint

Jenis task.

project_id

bigint

Identifier ruang kerja.

week_number

bigint

Minggu ke berapa dalam tahun untuk timestamp data.

task_owner

string

ID pemilik.

compute_resource_type

string

Jenis sumber daya komputasi.

compute_resource_id

string

Identifier sumber daya komputasi: nama proyek MaxCompute, ID kluster EMR, ID instans Hologres, dll.

datasource_name

string

Nama sumber data.

inst_success_count

bigint

Jumlah instans yang berhasil.

inst_failed_count

bigint

Jumlah instans yang gagal.

inst_running_count

bigint

Jumlah instans yang sedang berjalan.

inst_abnormal_count

bigint

Jumlah instans abnormal.

inst_not_started_count

bigint

Jumlah instans yang belum dimulai.

inst_runtime_cu

double

Konsumsi CU runtime instans.

task_avg_cu_31d

double

Rata-rata harian konsumsi CU task (dalam 31 hari).

dt

string

Partisi tanggal dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.

Field

Type

Description

node_type

bigint

Jenis node.

inst_status

string

Status instans.

inst_count

bigint

Jumlah instans.

avg_inst_count_7d

double

Rata-rata 7 hari jumlah instans.

granularity

string

Granularitas statistik: DAILY, WEEKLY.

dt

string

Partisi tanggal dalam format YYYYMMDD. Nilainya dapat berupa tanggal apa pun dari 31 hari yang lalu hingga kemarin.