DataWorks Open Data menyediakan tabel dan tampilan multidimensi untuk mengumpulkan metadata. Topik ini mencantumkan tabel dan tampilan yang tersedia serta menjelaskan skemanya.
Metadata
DataWorks menghasilkan tabel metadata dan tabel metrik sampel berdasarkan metadata sumber daya di tenant Anda, seperti tabel, task, instans, ruang kerja, anggota, dan proyek. Skema tabel-tabel ini bersifat dinamis, dan skema yang ditampilkan di UI merupakan acuan resmi.
Isu tabel aset (asset_table_issues)
Field partisi: dt
Deskripsi: Detail isu tata kelola data pada tabel.
|
Parameter |
Type |
Description |
|
tenant_id |
string |
ID tenant DataWorks. |
|
meta_entity_id |
string |
ID entitas metadata yang sesuai. |
|
uuid |
string |
Kunci unik tabel. |
|
meta_entity_type |
string |
Tipe entitas metadata yang sesuai. Contohnya, maxcompute-table. |
|
entity_type |
string |
Tipe entitas. Contohnya, table, view, dan materialized_view. |
|
account_id |
string |
Akun utama yang memiliki aset tersebut. |
|
datasource_type |
string |
Tipe sumber data. Contohnya, E-MapReduce dan MaxCompute. |
|
datasource_id |
string |
Nama engine, yaitu projectName untuk MaxCompute, clusterId untuk E-MapReduce, atau databaseName untuk Hologres. |
|
catalog_name |
string |
Nama katalog Data Lake Formation, digunakan ketika Data Lake Formation merupakan sumber metadata. |
|
database_name |
string |
Nama database. Untuk E-MapReduce, ini adalah dbName. |
|
schema_name |
string |
Nama skema. |
|
rule_id |
string |
ID aturan tata kelola. |
|
rule_name_zh |
string |
Nama aturan tata kelola dalam bahasa Tiongkok. |
|
rule_name_en |
string |
Nama aturan tata kelola dalam bahasa Inggris. |
|
category |
string |
Dimensi aturan tata kelola. |
|
deduct_score_tenant |
string |
Poin yang dikurangi pada tingkat tenant. Nilainya akurat hingga empat tempat desimal. |
|
deduct_score_owner |
string |
Poin yang dikurangi pada tingkat pemilik. Nilainya akurat hingga empat tempat desimal. |
|
cost |
string |
Jumlah resource yang terbuang. |
|
project_id |
string |
ID proyek DataWorks. |
|
dt |
string |
Partisi tanggal, field partisi logis, dalam format YYYYMMDD. |
Profil tabel aset (asset_table_profiles)
Field partisi: dt
Deskripsi: Metrik detail untuk aset tabel.
|
Parameter |
Type |
Description |
|
tenant_id |
bigint |
ID tenant sumber. |
|
meta_entity_id |
string |
ID entitas metadata yang sesuai. |
|
meta_entity_type |
string |
Tipe entitas metadata yang sesuai. Contohnya, |
|
entity_type |
string |
Tipe entitas, seperti |
|
account_id |
string |
Akun utama yang memiliki aset tersebut. |
|
datasource_type |
string |
Tipe sumber data, seperti |
|
datasource_id |
string |
Nama engine. Contohnya termasuk |
|
catalog_name |
string |
Nama katalog Data Lake Formation (DLF). Field ini diisi hanya ketika DLF merupakan sumber metadata. |
|
database_name |
string |
Nama database. Untuk E-MapReduce, ini sesuai dengan |
|
schema_name |
string |
Nama skema. |
|
uuid |
string |
Kunci unik tabel. |
|
name |
string |
Nama tabel. |
|
owner |
string |
Pemilik aset. |
|
last_access_timestamp |
bigint |
Stempel waktu akses terakhir tabel. |
|
meta_modified_timestamp |
bigint |
Stempel waktu UNIX 13 digit yang menunjukkan kapan metadata tabel terakhir dimodifikasi. |
|
data_modified_timestamp |
bigint |
Stempel waktu UNIX 13 digit yang menunjukkan kapan data tabel terakhir dimodifikasi. |
|
create_timestamp |
bigint |
Stempel waktu pembuatan tabel. |
|
comment |
string |
Komentar tabel. |
|
partition_keys |
string |
Kunci partisi untuk tabel. |
|
tags |
string |
Tag aset. |
|
governance_rule_finding_count |
bigint |
Jumlah isu yang diidentifikasi oleh aturan tata kelola. |
|
governance_rule_finding_history_count |
string |
Jumlah historis temuan tata kelola aset. |
|
governance_health_score |
string |
Skor kesehatan tata kelola aset. |
|
governance_health_level |
string |
Tingkat kesehatan tata kelola aset, diturunkan dari skornya. |
|
is_partitioned |
bigint |
Menunjukkan apakah tabel dipartisi. |
|
content_size |
bigint |
Ukuran logis tabel. |
|
record_num |
bigint |
Jumlah record dalam tabel. |
|
life_cycle |
string |
Siklus hidup tabel. |
|
partition_count |
bigint |
Jumlah partisi tabel. |
|
view_count_monthly |
bigint |
Jumlah tampilan tabel selama sebulan terakhir. |
|
access_count |
bigint |
Jumlah total akses tabel. |
|
upstream_table_count |
bigint |
Jumlah tabel hulu. |
|
upstream_table_detail |
string |
Detail tentang tabel hulu. |
|
downstream_table_count |
bigint |
Jumlah tabel hilir. |
|
downstream_table_detail |
string |
Detail tentang tabel hilir. |
|
producing_project_ids |
string |
Daftar ruang kerja yang menghasilkan tabel. |
|
producing_tasks_count |
bigint |
Jumlah task yang menghasilkan tabel ini. |
|
producing_tasks_detail |
string |
Detail tentang task yang menghasilkan tabel ini. |
|
using_tasks_count |
bigint |
Jumlah task yang menggunakan tabel ini. |
|
using_tasks_detail |
string |
Detail tentang task yang menggunakan tabel ini. |
|
quality_rule_count |
bigint |
Jumlah aturan kualitas untuk tabel. |
|
quality_monitor_count |
bigint |
Jumlah metrik pemantauan kualitas untuk tabel. |
|
quality_rule_7_days_failed_count |
bigint |
Jumlah pemeriksaan aturan kualitas yang gagal dalam 7 hari terakhir. |
|
quality_monitor_7_days_failed_count |
bigint |
Jumlah pemeriksaan metrik pemantauan kualitas yang gagal dalam 7 hari terakhir. |
|
dt |
string |
Partisi tanggal, yang berfungsi sebagai field partisi logis. Formatnya adalah |
Isu task aset (asset_task_issues)
Field partisi: dt
Deskripsi: Detail isu tata kelola data yang diidentifikasi dalam task.
|
Parameter |
Type |
Description |
|
tenant_id |
string |
ID tenant DataWorks. |
|
node_id |
string |
ID node penjadwalan. |
|
node_name |
string |
Nama node. |
|
node_type |
string |
Tipe node. Nilai yang valid: SQL, SQLCost, LOT, dan CUPID. |
|
node_owner |
string |
ID dasar pemilik node. |
|
priority |
string |
Prioritas node. |
|
rule_id |
string |
ID aturan tata kelola. |
|
rule_name_zh |
string |
Nama aturan tata kelola dalam bahasa Tiongkok. |
|
rule_name_en |
string |
Nama aturan tata kelola dalam bahasa Inggris. |
|
category |
string |
Domain tata kelola aturan. |
|
deduct_score_tenant |
string |
Pengurangan skor untuk tenant, akurat hingga empat tempat desimal. |
|
deduct_score_owner |
string |
Pengurangan skor untuk pemilik, akurat hingga empat tempat desimal. |
|
cost |
string |
Manfaat yang diperoleh dengan menyelesaikan isu tersebut, biasanya diukur sebagai penghematan biaya. |
|
project_id |
string |
ID proyek DataWorks. |
|
dt |
string |
Partisi tanggal logis, dalam format YYYYMMDD. |
Profil task aset (asset_task_profiles)
Field partisi: dt
Deskripsi: Metrik detail untuk task aset.
|
Parameter |
Type |
Description |
|
tenant_id |
bigint |
ID tenant. |
|
data_asset_id |
string |
ID aset dalam modul, sesuai dengan |
|
name |
string |
Nama aset, sesuai dengan |
|
project_id |
bigint |
ID ruang kerja tempat aset berada. |
|
project_env |
string |
Lingkungan. Nilai yang valid: |
|
owner |
string |
Pemilik aset. |
|
create_user |
string |
Pengguna yang membuat aset. |
|
create_time |
bigint |
Waktu saat aset dibuat. |
|
modify_user |
string |
Pengguna yang terakhir memodifikasi aset. |
|
modify_time |
bigint |
Waktu saat aset terakhir dimodifikasi. |
|
trigger_type |
string |
Tipe pemicu. Nilai yang valid: |
|
trigger_recurrence_type |
string |
Status penjadwalan. Nilai yang valid: |
|
trigger_cron |
string |
Ekspresi cron. |
|
type |
bigint |
Tipe kode yang dieksekusi oleh node. Untuk daftar kode tipe node, lihat dokumentasi DataStudio di https://www.alibabacloud.com/help/zh/dataworks/user-guide/node-development-of-data-studio. |
|
script_parameters |
string |
Parameter skrip. |
|
priority |
bigint |
Prioritas task. Nilai yang valid berkisar dari 1 (terendah) hingga 8 (tertinggi). Default-nya adalah 1. |
|
trigger_start_time |
bigint |
Tanggal mulai penjadwalan. |
|
trigger_end_time |
bigint |
Tanggal akhir penjadwalan. |
|
runtime_resource_group_id |
bigint |
ID kelompok sumber daya tempat node berada. |
|
runtime_cu |
string |
Unit komputasi (CUs). |
|
baseline_id |
bigint |
ID garis dasar tempat node berada. |
|
rerun_times |
bigint |
Jumlah maksimum kali task dapat dijalankan ulang. |
|
rerun_interval |
bigint |
Interval jalankan ulang, dalam milidetik. |
|
rerun_mode_type |
string |
Menentukan kapan task dapat dijalankan ulang. Nilai yang valid: |
|
tags |
string |
Tag yang terkait dengan aset. |
|
tags_count |
bigint |
Jumlah tag yang terkait dengan aset. |
|
input_table_count |
bigint |
Jumlah tabel input. |
|
output_table_count |
bigint |
Jumlah tabel output. |
|
input_table_detail |
string |
Detail tabel input. |
|
output_table_detail |
string |
Detail tabel output. |
|
upstream_node_count |
bigint |
Jumlah node hulu. |
|
downstream_node_count |
bigint |
Jumlah node hilir. |
|
governance_rule_finding_count |
bigint |
Jumlah isu yang diidentifikasi oleh aturan tata kelola. |
|
governance_rule_finding_history_count |
string |
Jumlah historis isu tata kelola untuk aset. |
|
governance_health_score |
string |
Skor kesehatan aset. |
|
governance_health_level |
string |
Tingkat kesehatan aset, berdasarkan skornya. |
|
engine_datasource_id |
string |
ID engine komputasi. |
|
engine_instance_count |
bigint |
Jumlah instans mesin komputasi. |
|
engine_instance_run_time |
bigint |
Total waktu proses instans mesin komputasi. |
|
engine_instance_comput_volume_cost |
string |
Volume komputasi. |
|
engine_instance_cu_cost |
string |
Unit komputasi (CUs) yang dikonsumsi. |
|
engine_instance_cpu_cost |
string |
Konsumsi CPU. |
|
engine_instance_mem_cost |
string |
Konsumsi memori. |
|
engine_instance_exist_data_skew |
bigint |
Menunjukkan apakah terjadi kesenjangan data. |
|
engine_instance_suggestions |
string |
Saran untuk mengatasi kesenjangan data. |
|
engine_instance_data_skew_ids |
string |
ID instans dengan kesenjangan data. |
|
engine_instance_ids |
string |
ID instans engine. |
|
task_instance_wait_time_cost_sum |
bigint |
Total waktu tunggu instans, dalam milidetik. |
|
task_instance_wait_time_cost_max |
bigint |
Waktu tunggu instans maksimum, dalam milidetik. |
|
task_instance_run_time_cost_sum |
bigint |
Total waktu proses instans, dalam milidetik. |
|
task_instance_run_time_cost_max |
bigint |
Waktu proses maksimum untuk satu instans, dalam milidetik. |
|
task_instance_7_days_wait_time_cost_max |
bigint |
Waktu tunggu instans maksimum selama tujuh hari terakhir, dalam milidetik. |
|
task_instance_7_days_run_time_cost_max |
bigint |
Waktu proses instans maksimum selama tujuh hari terakhir, dalam milidetik. |
|
task_instance_count |
bigint |
Jumlah instans. |
|
task_instance_7_days_failed_count |
bigint |
Jumlah instans yang gagal selama tujuh hari terakhir. |
|
task_instance_7_days_failed_day_count |
bigint |
Jumlah hari dengan kegagalan selama tujuh hari terakhir. |
|
task_instance_7_days_frezeed_day_count |
bigint |
Jumlah hari task dibekukan selama tujuh hari terakhir. |
|
task_instance_7_days_dry_run_day_count |
bigint |
Jumlah hari task dilewati selama tujuh hari terakhir. |
|
quality_monitor_count |
bigint |
Jumlah metrik pemantauan kualitas data. |
|
quality_monitor_7_days_failed_count |
bigint |
Jumlah metrik pemantauan kualitas data yang gagal selama tujuh hari terakhir. |
|
di_task_resource_group_id |
string |
ID kelompok sumber daya integrasi data tempat node berada. |
|
di_task_is_public_network |
bigint |
Menunjukkan apakah task integrasi data menggunakan lalu lintas jaringan publik. |
|
di_task_concurrency |
bigint |
Tingkat konkurensi untuk task integrasi data. |
|
di_task_total_records |
bigint |
Jumlah total record yang disinkronkan. |
|
di_task_total_bytes |
bigint |
Total volume data yang disinkronkan, dalam byte. |
|
di_task_source_type |
string |
Tipe sumber data. |
|
di_task_target_type |
string |
Tipe target data. |
|
di_task_run_time_cost |
bigint |
Waktu proses task integrasi data, dalam milidetik. |
|
di_task_wait_time_cost |
bigint |
Waktu tunggu task integrasi data, dalam milidetik. |
|
dt |
string |
Partisi tanggal untuk catatan, dalam format |
Katalog data (catalogs)
|
Parameter |
Type |
Description |
|
datasource_type |
string |
Tipe sumber data, seperti DLF dan StarRocks. |
|
datasource_id |
string |
ID sumber data, seperti ID kluster StarRocks atau ID akun utama untuk DLF. |
|
name |
string |
Nama katalog data. |
|
type |
string |
Tipe katalog data, seperti Hive atau JDBC. |
|
comment |
string |
Komentar katalog data. |
|
location |
string |
Lokasi katalog data. |
|
properties |
string |
Properti konfigurasi, ditentukan sebagai string JSON. |
|
owner |
string |
Pemilik katalog data. Nilai ini bisa berupa UID akun Alibaba Cloud atau akun database, tergantung pada tipe sumber data. |
|
create_timestamp |
bigint |
Waktu pembuatan katalog data, direpresentasikan sebagai stempel waktu 13 digit (milidetik). |
|
update_timestamp |
bigint |
Waktu pembaruan terakhir katalog data, direpresentasikan sebagai stempel waktu 13 digit (milidetik). |
|
meta_entity_id |
string |
Pengidentifikasi unik yang ramah API untuk katalog data yang mematuhi spesifikasi ID entitas metadata. |
|
dt |
string |
Partisi tanggal, field partisi logis, dalam format YYYYMMDD. Nilai yang valid: [TODAY-31D, TODAY-1D]. |
Columns
|
Parameter |
Type |
Description |
|
datasource_type |
string |
Tipe sumber data, seperti DLF dan StarRocks. |
|
datasource_id |
string |
ID sumber data, seperti ID kluster StarRocks, ID akun utama untuk DLF atau MaxCompute, atau ID instans RDS. |
|
catalog_name |
string |
Nama katalog data. Field ini diisi hanya jika tipe sumber data mendukung katalog data. |
|
database_name |
string |
Nama database. |
|
schema_name |
string |
Nama skema. Field ini diisi hanya jika tipe sumber data mendukung skema. |
|
table_name |
string |
Nama tabel. |
|
name |
string |
Nama kolom. |
|
type |
string |
Tipe data kolom. |
|
comment |
string |
Komentar untuk kolom. |
|
ordinal_position |
bigint |
Posisi ordinal kolom dalam tabel (berbasis 1). |
|
is_primary_key |
boolean |
Menunjukkan apakah kolom merupakan bagian dari kunci primer. |
|
is_nullable |
boolean |
Menunjukkan apakah kolom mengizinkan nilai NULL. |
|
is_partition_key |
boolean |
Menunjukkan apakah kolom merupakan kunci partisi. |
|
properties |
string |
String JSON properti dan parameter. |
|
business_description |
string |
Deskripsi bisnis kolom. |
|
meta_entity_id |
string |
Pengidentifikasi unik untuk kolom. Pengidentifikasi ini ramah API dan mematuhi spesifikasi ID entitas metadata. |
|
dt |
string |
Partisi tanggal (kolom partisi logis) dalam format YYYYMMDD. Rentang yang valid: [TODAY-31D, TODAY-1D]. |
Databases
|
Parameter |
Type |
Description |
|
datasource_type |
string |
Tipe sumber data. Contohnya termasuk |
|
datasource_id |
string |
ID sumber data. Misalnya, ID kluster StarRocks, ID akun utama untuk Data Lake Formation (DLF) atau MaxCompute, atau ID instans RDS. |
|
catalog_name |
string |
Nama katalog. Field ini diisi hanya jika tipe sumber data mendukung katalog. |
|
name |
string |
Nama database. |
|
type |
string |
Tipe database. |
|
comment |
string |
Komentar database. |
|
location |
string |
Jalur database. |
|
properties |
string |
Properti dan parameter (string JSON). |
|
owner |
string |
Pemilik database. Nilainya adalah UID akun Alibaba Cloud atau akun sistem database, tergantung pada tipe sumber data. |
|
is_external |
boolean |
Menunjukkan apakah database merupakan database eksternal. |
|
create_timestamp |
bigint |
Stempel waktu 13 digit yang menunjukkan waktu pembuatan. |
|
update_timestamp |
bigint |
Stempel waktu 13 digit yang menunjukkan waktu pembaruan terakhir. |
|
meta_entity_id |
string |
Pengidentifikasi unik untuk database. ID ini sesuai dengan spesifikasi ID entitas metadata. |
|
dt |
string |
Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilai yang valid: [TODAY-31D, TODAY-1D]. |
Alur data tingkat tabel dan kolom (lineages)
|
Parameter |
Type |
Description |
|
source_meta_entity_id |
string |
Pengidentifikasi unik untuk sumber. Pengidentifikasi ini ramah API dan sesuai dengan spesifikasi ID entitas metadata. |
|
source_raw_entity_type |
string |
Tipe entitas sumber. Field ini digunakan untuk identifikasi jika metadata entitas tidak dikelola dan field |
|
source_uuid |
string |
Pengidentifikasi unik yang ramah UI untuk sumber yang digunakan untuk akses halaman. |
|
target_meta_entity_id |
string |
Pengidentifikasi unik untuk target. Pengidentifikasi ini ramah API dan sesuai dengan spesifikasi ID entitas metadata. |
|
target_raw_entity_type |
string |
Tipe entitas target. Field ini digunakan untuk identifikasi jika metadata entitas tidak dikelola dan field |
|
target_uuid |
string |
Pengidentifikasi unik yang ramah UI untuk target yang digunakan untuk akses halaman. |
|
compute_engine |
string |
Engine komputasi, seperti |
|
transform_type |
string |
Tipe task transformasi yang dilakukan oleh engine komputasi. Contohnya: |
|
task_id |
bigint |
ID task terjadwal DataWorks. Lihat tabel |
|
task_instance_id |
bigint |
ID instans task terjadwal DataWorks. Lihat tabel |
|
lineage_time |
bigint |
Stempel waktu, dalam milidetik, saat alur data dihasilkan. |
|
granularity |
string |
Tingkat alur data, seperti |
|
dt |
string |
Partisi tanggal (field partisi logis), dalam format YYYYMMDD. Rentang nilai: [TODAY-31D, TODAY-1D]. |
Partitions
|
Parameter |
Type |
Description |
|
datasource_type |
string |
Tipe sumber data, seperti MaxCompute, DLF, dan StarRocks. |
|
datasource_id |
string |
ID sumber data, seperti ID kluster StarRocks, ID akun utama untuk DLF atau MaxCompute, atau ID instans RDS. |
|
catalog_name |
string |
Nama katalog data. Field ini diisi ketika tipe sumber data mendukung katalog data. |
|
database_name |
string |
Nama database. |
|
schema_name |
string |
Nama skema. Field ini diisi ketika tipe sumber data mendukung skema. |
|
table_name |
string |
Nama tabel. |
|
name |
string |
Nama partisi (spesifikasi partisi). |
|
create_timestamp |
bigint |
Stempel waktu pembuatan 13 digit. |
|
update_timestamp |
bigint |
Stempel waktu pembaruan 13 digit. |
|
content_size |
bigint |
Ukuran partisi, dalam byte. |
|
properties |
string |
String JSON properti dan parameter. |
|
dt |
string |
Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Rentang nilai yang valid adalah [TODAY-31D, TODAY-1D]. |
Resource groups
|
Parameter |
Type |
Description |
|
resource_group_id |
bigint |
ID kelompok sumber daya. |
|
resource_group_identifier |
string |
Pengidentifikasi kelompok sumber daya. |
|
resource_group_type |
bigint |
Tipe kelompok sumber daya. Nilai yang valid: 1 (kelompok sumber daya penjadwalan), 2 (kelompok sumber daya MaxCompute), dan 4 (kelompok sumber daya integrasi data). |
|
resource_group_mode |
bigint |
Mode kelompok sumber daya. Nilai yang valid: 1 (prabayar), 2 (pay-as-you-go), dan 3 (edisi developer, hanya MaxCompute). |
|
resource_group_status |
bigint |
Status kelompok sumber daya. Nilai yang valid: 0 (Normal), 1 (Dibekukan), 2 (Dihapus), 3 (Membuat), 4 (Pembuatan Gagal), 5 (Memperbarui), 6 (Pembaruan Gagal), 7 (Menghapus), dan 8 (Penghapusan Gagal). |
|
is_exclusive_resource_group |
boolean |
Menentukan apakah ini kelompok sumber daya eksklusif. |
|
dt |
string |
Partisi tanggal, field partisi logis. Format: YYYYMMDD. Rentang nilai: [TODAY-31D, TODAY-1D]. |
Schemas
|
Parameter |
Type |
Description |
|
datasource_type |
string |
Tipe sumber data. Contohnya: holodb, MaxCompute, dan PostgreSQL. |
|
datasource_id |
string |
ID sumber data, seperti ID instans RDS atau ID akun untuk MaxCompute. |
|
catalog_name |
string |
Nama katalog data. Field ini diisi hanya jika tipe sumber data mendukung katalog data. |
|
database_name |
string |
Nama database. |
|
name |
string |
Nama skema. |
|
type |
string |
Tipe skema. |
|
comment |
string |
Komentar tentang skema. |
|
properties |
string |
Properti dan parameter, dalam format string JSON. |
|
owner |
string |
Pemilik skema. Nilainya bisa berupa UID akun Alibaba Cloud atau akun database, tergantung pada tipe sumber data. |
|
create_timestamp |
bigint |
Waktu pembuatan, direpresentasikan sebagai stempel waktu UNIX 13 digit. |
|
update_timestamp |
bigint |
Waktu pembaruan terakhir, direpresentasikan sebagai stempel waktu UNIX 13 digit. |
|
meta_entity_id |
string |
Pengidentifikasi unik untuk skema, yang ramah API dan sesuai dengan spesifikasi ID entitas meta. |
|
dt |
string |
Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Rentang nilai adalah [TODAY-31D, TODAY-1D]. |
Tables
|
Parameter |
Type |
Description |
|
datasource_type |
string |
Tipe sumber data, seperti Data Lake Formation, StarRocks, MaxCompute, Hologres, atau MySQL. |
|
datasource_id |
string |
ID sumber data. Nilai ini adalah ID kluster untuk kluster StarRocks, ID akun utama untuk Data Lake Formation atau MaxCompute, atau ID instans untuk instans RDS. |
|
catalog_name |
string |
Nama katalog data. Field ini hanya berlaku untuk tipe sumber data yang mendukung katalog data. |
|
database_name |
string |
Nama database. |
|
schema_name |
string |
Nama skema. Field ini hanya berlaku untuk tipe sumber data yang mendukung skema. |
|
name |
string |
Nama tabel. |
|
type |
string |
Tipe tabel. |
|
comment |
string |
Komentar untuk tabel. |
|
partition_keys |
string |
Kunci partisi. Untuk partisi multi-level, kunci dipisahkan dengan koma (,). |
|
location |
string |
Jalur penyimpanan untuk tabel. |
|
properties |
string |
String JSON properti dan parameter. Untuk tampilan (view), field ini berisi definisi DDL tampilan tersebut. |
|
owner |
string |
Pemilik tabel. Nilainya bisa berupa ID akun Alibaba Cloud atau akun sistem database, tergantung pada tipe sumber data. |
|
content_size |
bigint |
Ukuran penyimpanan, dalam byte. |
|
data_retention |
map<string,string> |
Periode retensi data atau siklus hidup. Nilainya bervariasi berdasarkan tipe tabel. Untuk tabel MaxCompute, kuncinya adalah |
|
is_compressed |
boolean |
Menunjukkan apakah tabel dikompresi. |
|
is_temporary |
boolean |
Menunjukkan apakah tabel merupakan tabel temporary. |
|
entity_type |
string |
Tipe entitas, seperti |
|
input_format |
string |
Format input. |
|
output_format |
string |
Format output. |
|
serde_parameters |
string |
Parameter SerDe. |
|
serialization_lib |
string |
Pustaka serialisasi. |
|
create_timestamp |
bigint |
Stempel waktu UNIX 13 digit yang menunjukkan kapan tabel dibuat. |
|
meta_modified_timestamp |
bigint |
Stempel waktu UNIX 13 digit yang menunjukkan kapan metadata tabel terakhir dimodifikasi. |
|
data_modified_timestamp |
bigint |
Stempel waktu UNIX 13 digit yang menunjukkan kapan data tabel terakhir dimodifikasi. |
|
last_access_timestamp |
bigint |
Stempel waktu UNIX 13 digit yang menunjukkan kapan tabel terakhir diakses. |
|
business_description |
string |
Deskripsi bisnis atau nama dalam bahasa Tiongkok. |
|
meta_entity_id |
string |
Pengidentifikasi unik untuk tabel. ID ini dirancang untuk penggunaan API dan sesuai dengan spesifikasi ID entitas metadata. Contoh:
|
|
uuid |
string |
UUID tabel, digunakan untuk menautkan ke halaman detail tabel di peta data DataWorks. |
|
business_tags |
array<string> |
Tag bisnis. Field ini berisi tag yang ditetapkan di halaman peta data. |
|
wikis |
array<struct< |
Wiki tabel. Struct berisi field-field berikut: |
|
producing_tasks |
array<bigint> |
Daftar ID task penjadwalan yang menghasilkan data untuk tabel ini. Untuk informasi lebih lanjut, lihat tabel |
|
dt |
string |
Partisi tanggal (field partisi logis) dalam format YYYYMMDD. Nilai yang valid: |
Instans run task dan alur kerja (task_instances)
|
Parameter |
Type |
Description |
|
id |
bigint |
ID instans task. |
|
node_id |
bigint |
ID task. Mengacu pada tabel |
|
node_type |
bigint |
Tipe task. Untuk daftar nilai kode node, lihat Node Development. |
|
node_name |
string |
Nama task. |
|
description |
string |
Deskripsi task. |
|
workflow_id |
bigint |
ID alur kerja. Mengacu pada tabel |
|
workflow_name |
string |
Nama alur kerja. |
|
workflow_instance_id |
bigint |
ID instans alur kerja. |
|
workflow_instance_type |
bigint |
Tipe instans alur kerja. Nilai yang valid: 0 (penjadwalan harian), 1 (task manual), 2 (uji coba asap), 3 (backfill), 4 (alur kerja sekali pakai), 5 (alur kerja manual). |
|
trigger_type |
string |
Tipe pemicu (Scheduler/Manual). |
|
trigger_recurrence |
string |
Mode run. Nilai yang valid: 0 (normal), 1 (manual), 2 (dijeda), 3 (dry run), 4 (direferensikan). |
|
timeout |
bigint |
Timeout eksekusi task, dalam jam. |
|
rerun_mode |
string |
Konfigurasi jalankan ulang. Nilai yang valid: 0 (dapat dijalankan ulang saat gagal), 1 (dapat dijalankan ulang saat gagal atau sukses), 2 (tidak dapat dijalankan ulang). |
|
run_number |
bigint |
Jumlah run. |
|
period_number |
bigint |
Nomor periode. |
|
baseline_id |
bigint |
ID garis dasar. |
|
priority |
bigint |
Prioritas task (1-8). |
|
script_parameters |
string |
Daftar parameter skrip untuk run tersebut. |
|
runtime_resource_group_id |
bigint |
ID kelompok sumber daya untuk run task. |
|
runtime_resource_group_identifier |
string |
Pengidentifikasi kelompok sumber daya untuk run task. |
|
runtime_image |
string |
ID citra runtime. |
|
runtime_cu |
string |
CUs yang dikonsumsi saat runtime. |
|
runtime_process_id |
string |
ID proses saat runtime. |
|
runtime_gateway |
string |
Gerbang yang digunakan saat runtime. |
|
datasource_name |
string |
Nama sumber data. |
|
inputs_variables |
array<struct< |
Daftar variabel input. |
|
outputs |
array<struct< |
Daftar pengidentifikasi output. |
|
outputs_variables |
array<struct< |
Daftar variabel output. |
|
tags |
array<struct< |
Daftar tag task. |
|
status |
bigint |
Status task. Nilai yang valid: 1 (belum dijalankan), 2 (menunggu jadwal), 3 (menunggu sumber daya), 4 (Berjalan), 5 (gagal), 6 (berhasil), 7 (memverifikasi), 8 (menunggu kondisi), 9 (menunggu pemicu). |
|
trigger_time |
string |
Waktu task dipicu. |
|
bizdate |
string |
Tanggal bisnis. |
|
started_time |
string |
Waktu task dimulai. |
|
finished_time |
string |
Waktu penyelesaian tugas. |
|
project_id |
bigint |
ID proyek. Mengacu pada field |
|
project_env |
string |
Tipe lingkungan (PROD/DEV). |
|
owner |
string |
ID akun pemilik. Mengacu pada tabel |
|
create_time |
string |
Waktu pembuatan. |
|
modify_time |
string |
Waktu modifikasi terakhir. |
|
create_user |
string |
ID pengguna pembuat. Mengacu pada tabel |
|
modify_user |
string |
ID pengguna yang terakhir memodifikasi. Mengacu pada tabel |
|
waiting_resource_time |
string |
Waktu yang dihabiskan menunggu sumber daya. |
|
waiting_trigger_time |
string |
Waktu yang dihabiskan menunggu pemicu. |
|
dt |
string |
Partisi tanggal logis, dalam format YYYYMMDD. Rentang nilai: [TODAY-31D, TODAY-1D]. |
Definisi task dan alur kerja (tasks)
|
Parameter |
Type |
Description |
|
id |
bigint |
ID task. |
|
name |
string |
Nama task. |
|
description |
string |
Deskripsi task. |
|
type |
bigint |
Tipe task. Lihat node development untuk nilai kode node. |
|
workflow_id |
bigint |
ID alur kerja. |
|
instance_mode |
string |
Mode pembuatan instans.
|
|
baseline_id |
bigint |
ID garis dasar. |
|
priority |
bigint |
Prioritas task, berkisar dari |
|
timeout |
bigint |
Timeout eksekusi task, dalam jam. |
|
rerun_mode |
bigint |
Kebijakan jalankan ulang untuk task. Nilai yang valid: |
|
rerun_times |
bigint |
Jumlah upaya jalankan ulang. Pengaturan ini hanya berlaku ketika task dikonfigurasi untuk mengizinkan jalankan ulang. |
|
rerun_interval |
bigint |
Interval antara upaya jalankan ulang, dalam detik. |
|
script_parameters |
string |
Parameter skrip untuk runtime. |
|
trigger_type |
string |
Tipe pemicu. Nilai yang valid: |
|
trigger_recurrence |
bigint |
Mode run ketika task dipicu. Nilai yang valid: |
|
trigger_cron |
string |
Ekspresi Cron. Berlaku ketika |
|
trigger_start_time |
string |
Waktu mulai untuk pemicu terjadwal. Berlaku ketika |
|
trigger_end_time |
string |
Waktu kedaluwarsa untuk pemicu terjadwal. Berlaku ketika |
|
runtime_resource_group_id |
bigint |
ID kelompok sumber daya untuk runtime task. |
|
runtime_image |
string |
ID citra untuk runtime task. |
|
runtime_cu |
string |
Konsumsi CU untuk runtime task. |
|
datasource_name |
string |
Nama sumber data. |
|
inputs_variables |
array<struct< |
Variabel input. |
|
outputs |
array<struct< |
Pengidentifikasi output task. |
|
outputs_variables |
array<struct< |
Variabel output. |
|
dependencies |
array<struct< |
Dependensi. |
|
related_workflow_id |
bigint |
ID alur kerja terkait. |
|
tags |
array<struct< |
Tag task. |
|
project_id |
bigint |
ID proyek. Lihat field |
|
project_env |
string |
Tipe lingkungan. Nilai yang valid: |
|
owner |
string |
ID akun pemilik task. Lihat tabel |
|
create_time |
string |
Waktu pembuatan. |
|
modify_time |
string |
Waktu modifikasi terakhir. |
|
create_user |
string |
ID akun pengguna yang membuat task. Lihat tabel |
|
modify_user |
string |
ID akun pengguna yang terakhir memodifikasi task. Lihat tabel |
|
dt |
string |
Partisi tanggal dalam format |
Users
|
Parameter |
Type |
Description |
|
user_id |
string |
Pengidentifikasi unik untuk pengguna. |
|
user_nick |
string |
Alias akun atau nama tampilan pengguna. |
|
dt |
string |
Field partisi logis, merepresentasikan partisi tanggal dalam format YYYYMMDD. Nilai yang valid: [TODAY-31D, TODAY-1D]. |
Anggota ruang kerja
|
Parameter |
Type |
Description |
|
workspace_id |
bigint |
ID ruang kerja. Lihat tabel |
|
user_id |
string |
ID pengguna. Lihat tabel |
|
user_status |
bigint |
Status pengguna. Nilai yang valid: |
|
gmt_create_ts |
bigint |
Waktu pembuatan, stempel waktu 13 digit. |
|
gmt_modified_ts |
bigint |
Waktu modifikasi, stempel waktu 13 digit. |
|
dt |
string |
Partisi tanggal (partisi logis) dalam format |
Workspaces
|
Parameter |
Type |
Description |
|
workspace_id |
bigint |
ID ruang kerja. |
|
workspace_name |
string |
Nama ruang kerja. |
|
workspace_identifier |
string |
Pengidentifikasi ruang kerja. |
|
workspace_description |
string |
Deskripsi ruang kerja. |
|
workspace_owner |
string |
ID pemilik ruang kerja. Lihat tabel |
|
workspace_status |
bigint |
Status ruang kerja. Nilai yang valid: |
|
dt |
string |
Partisi tanggal (field partisi logis). Format: |
Instans aturan kualitas data (quality_rule_results)
Field partisi: dt
Deskripsi: Menjelaskan instans aturan kualitas data.
|
Parameter |
Type |
Description |
|
id |
bigint |
Kunci primer. |
|
scan_run_id |
bigint |
ID instans pemantauan kualitas. |
|
rule_id |
bigint |
ID aturan. |
|
rule_name |
string |
Nama aturan. |
|
status |
string |
Hasil validasi aturan. Nilai yang mungkin: Pass, Error, Warn, Fail, atau Running. |
|
severity |
string |
Kekuatan aturan. Nilai yang mungkin: High (aturan kuat) atau Normal (aturan lemah). |
|
create_time |
bigint |
Waktu pembuatan instans. |
|
modify_time |
bigint |
Waktu modifikasi terakhir instans. |
|
spec |
string |
Spesifikasi instans aturan. |
|
tags |
array<string> |
Tag untuk instans aturan. |
|
tenant_id |
bigint |
ID tenant DataWorks. |
|
project_id |
bigint |
ID ruang kerja DataWorks. |
|
meta_entity_id |
string |
Pengidentifikasi unik untuk entitas meta tabel. |
|
dt |
string |
Partisi tanggal, dalam format YYYYMMDD. Rentang nilai: [TODAY-D, TODAY-1D]. |
Metrik aturan kualitas data (quality_rules)
Field partisi: dt
Deskripsi: Metrik detail untuk setiap aturan kualitas data.
|
Parameter |
Type |
Description |
|
id |
bigint |
Kunci primer. |
|
scan_id |
bigint |
ID instans pemantauan kualitas. |
|
rule_name |
string |
Nama aturan. |
|
enabled |
boolean |
Menunjukkan apakah aturan diaktifkan. |
|
severity |
string |
Kekuatan aturan. Nilai yang mungkin: |
|
create_time |
bigint |
Waktu saat aturan dibuat. |
|
modify_time |
bigint |
Waktu saat aturan terakhir dimodifikasi. |
|
spec |
string |
Spesifikasi aturan. |
|
tags |
array<string> |
Tag aturan. |
|
tenant_id |
bigint |
ID tenant DataWorks. |
|
project_id |
bigint |
ID ruang kerja DataWorks. |
|
meta_entity_id |
string |
Pengidentifikasi unik entitas meta di peta data. |
|
pass_count |
int |
Jumlah kali aturan lolos. |
|
warn_count |
int |
Jumlah kali aturan memicu peringatan. |
|
error_count |
int |
Jumlah kali aturan memicu error. |
|
fail_count |
int |
Jumlah kali aturan gagal. |
|
dt |
string |
Partisi tanggal, dalam format |
Run pemindaian kualitas data (quality_scan_runs)
Field partisi: dt
Deskripsi: Menyimpan informasi tentang setiap run pemindaian kualitas data.
|
Parameter |
Type |
Description |
|
id |
bigint |
Kunci primer. |
|
scan_id |
bigint |
ID pemindaian kualitas data. |
|
name |
string |
Nama pemindaian. |
|
status |
string |
Status run pemindaian. Nilai yang valid: |
|
post_action_type |
string |
Aksi pasca-pemeriksaan. Nilai yang valid: |
|
data_filter |
string |
Rentang data yang digunakan untuk pengambilan sampel. |
|
trigger_time |
bigint |
Waktu terjadwal task. |
|
trigger_type |
string |
Tipe pemicu pemindaian kualitas data. Nilai yang valid: |
|
create_time |
bigint |
Waktu pembuatan run pemindaian. |
|
modify_time |
bigint |
Waktu saat run pemindaian terakhir dimodifikasi. |
|
datasource_id |
bigint |
ID sumber data tempat tabel berada. |
|
datasource_type |
string |
Tipe sumber data. |
|
computing_resource_id |
bigint |
ID sumber daya komputasi. |
|
compute_resource_option |
string |
Sumber daya komputasi yang digunakan untuk run pemindaian. |
|
spec |
string |
Spesifikasi pemindaian kualitas data. |
|
tenant_id |
bigint |
ID tenant DataWorks. |
|
project_id |
bigint |
ID ruang kerja DataWorks. |
|
owner |
string |
Pemilik pemindaian kualitas data. |
|
task_id |
bigint |
ID task penjadwalan. |
|
task_instance_id |
bigint |
ID instans task penjadwalan. |
|
meta_entity_id |
string |
Pengidentifikasi unik entitas metadata. |
|
table_name |
string |
Nama tabel. |
|
catalog_name |
string |
Nama katalog data tabel. |
|
schema_name |
string |
Nama skema tabel. |
|
database_name |
string |
Nama database tabel. |
|
cluster_id |
string |
ID kluster tabel. |
|
dt |
string |
Partisi tanggal, dalam format |
Metrik pemindaian kualitas data (quality_scans)
Field partisi: dt
Deskripsi: Metrik detail untuk task pemantauan kualitas data.
|
Parameter |
Type |
Description |
|
id |
bigint |
Pengidentifikasi unik untuk pemindaian kualitas. |
|
name |
string |
Nama pemindaian kualitas. |
|
data_filter_type |
string |
Tipe filter data. Nilai yang valid: |
|
data_filter |
string |
Ekspresi filter data. |
|
trigger_type |
string |
Tipe pemicu untuk pemantauan kualitas data. Nilai yang valid: |
|
create_time |
bigint |
Waktu saat pemindaian kualitas dibuat. |
|
modify_time |
bigint |
Waktu saat pemindaian kualitas terakhir diperbarui. |
|
computing_resource_id |
bigint |
ID engine komputasi. |
|
compute_resource_option |
string |
Sumber daya komputasi untuk task pemantauan kualitas data. |
|
spec |
string |
Spesifikasi untuk pemantauan kualitas data. |
|
related_tasks |
array<bigint> |
Task penjadwalan terkait. |
|
tenant_id |
bigint |
ID tenant DataWorks. |
|
project_id |
bigint |
ID ruang kerja DataWorks. |
|
owner |
string |
Pemilik pemindaian kualitas. |
|
datasource_id |
string |
ID sumber data tabel. |
|
datasource_type |
string |
Tipe sumber data. |
|
meta_entity_id |
string |
Pengidentifikasi unik untuk meta-entitas di katalog data. |
|
table_name |
string |
Nama tabel. |
|
catalog_name |
string |
Nama katalog data tabel. |
|
schema_name |
string |
Nama skema tabel. |
|
database_name |
string |
Nama database tabel. |
|
cluster_id |
string |
ID kluster tabel. |
|
related_scheduler_task_count |
int |
Jumlah task penjadwalan terkait. |
|
rule_count |
int |
Jumlah aturan terkait. |
|
high_severity_rule_count |
int |
Jumlah aturan terkait dengan tingkat keparahan tinggi. |
|
normal_severity_rule_count |
int |
Jumlah aturan terkait dengan tingkat keparahan normal. |
|
enabled_rule_count |
int |
Jumlah aturan yang diaktifkan. |
|
enabled_high_severity_rule_count |
int |
Jumlah aturan tingkat keparahan tinggi yang diaktifkan. |
|
enabled_normal_severity_rule_count |
int |
Jumlah aturan tingkat keparahan normal yang diaktifkan. |
|
rule_instance_count |
int |
Jumlah instans aturan yang dijalankan hari ini. |
|
high_severity_rule_instance_count |
int |
Jumlah instans aturan tingkat keparahan tinggi yang dijalankan hari ini. |
|
normal_severity_rule_instance_count |
int |
Jumlah instans aturan tingkat keparahan normal yang dijalankan hari ini. |
|
high_severity_rule_instance_pass_count |
int |
Jumlah instans aturan tingkat keparahan tinggi yang lolos hari ini. |
|
high_severity_rule_instance_warn_count |
int |
Jumlah instans aturan tingkat keparahan tinggi dengan peringatan (peringatan oranye) hari ini. |
|
high_severity_rule_instance_error_count |
int |
Jumlah instans aturan tingkat keparahan tinggi dengan error (peringatan merah) hari ini. |
|
high_severity_rule_instance_fail_count |
int |
Jumlah instans aturan tingkat keparahan tinggi yang gagal hari ini. |
|
normal_severity_rule_instance_pass_count |
int |
Jumlah instans aturan tingkat keparahan normal yang lolos hari ini. |
|
normal_severity_rule_instance_warn_count |
int |
Jumlah instans aturan tingkat keparahan normal dengan peringatan (peringatan oranye) hari ini. |
|
normal_severity_rule_instance_error_count |
int |
Jumlah instans aturan tingkat keparahan normal dengan error (peringatan merah) hari ini. |
|
normal_severity_rule_instance_fail_count |
int |
Jumlah instans aturan tingkat keparahan normal yang gagal hari ini. |
|
block_task_instance_count |
int |
Jumlah task penjadwalan yang diblokir hari ini. |
|
alert_rule_count |
int |
Jumlah langganan peringatan yang dikonfigurasi. |
|
sms_alert_rule_count |
int |
Jumlah langganan peringatan SMS yang dikonfigurasi. |
|
mail_alert_rule_count |
int |
Jumlah langganan peringatan email yang dikonfigurasi. |
|
phone_alert_rule_count |
int |
Jumlah langganan peringatan telepon yang dikonfigurasi. |
|
ding_alert_rule_count |
int |
Jumlah langganan peringatan DingTalk yang dikonfigurasi. |
|
feishu_alert_rule_count |
int |
Jumlah langganan peringatan Lark yang dikonfigurasi. |
|
weixin_alert_rule_count |
int |
Jumlah langganan peringatan WeChat yang dikonfigurasi. |
|
webhook_alert_rule_count |
int |
Jumlah langganan peringatan webhook kustom yang dikonfigurasi. |
|
alert_times |
int |
Jumlah peringatan yang dipicu hari ini. |
|
sms_alert_times |
int |
Jumlah peringatan SMS yang dipicu hari ini. |
|
mail_alert_times |
int |
Jumlah peringatan email yang dipicu hari ini. |
|
phone_alert_times |
int |
Jumlah peringatan telepon yang dipicu hari ini. |
|
ding_alert_times |
int |
Jumlah peringatan DingTalk yang dipicu hari ini. |
|
feishu_alert_times |
int |
Jumlah peringatan Lark yang dipicu hari ini. |
|
weixin_alert_times |
int |
Jumlah peringatan WeChat yang dipicu hari ini. |
|
webhook_alert_times |
int |
Jumlah peringatan webhook kustom yang dipicu hari ini. |
|
dt |
string |
Partisi tanggal dalam format |
Ringkasan kualitas data (table_quality_summary)
Field partisi: dt
Deskripsi: Berisi metrik kualitas data untuk tabel.
|
Parameter |
Type |
Description |
|
meta_entity_id |
string |
Pengidentifikasi unik untuk entitas meta tabel. |
|
project_id |
bigint |
ID ruang kerja DataWorks. |
|
table_name |
string |
Nama tabel. |
|
schema_name |
string |
Nama skema tabel. |
|
database_name |
string |
Nama database tabel. |
|
catalog_name |
string |
Nama katalog data tabel. |
|
datasource_id |
bigint |
ID sumber data tabel. Field ini bernilai NULL jika kualitas data tidak dikonfigurasi. |
|
tenant_id |
bigint |
ID tenant DataWorks. |
|
owner |
string |
Pemilik tabel. |
|
scan_count |
int |
Jumlah pemantau kualitas yang dikonfigurasi. |
|
scheduler_related_scan_count |
int |
Jumlah pemantau kualitas yang ditautkan ke penjadwalan. |
|
scan_run_count |
int |
Jumlah instans task pemantauan kualitas hari ini. |
|
alert_scan_run_count |
int |
Jumlah instans task pemantauan kualitas yang memicu peringatan hari ini. |
|
block_task_instance_scan_run_count |
int |
Jumlah instans task pemantauan kualitas yang memblokir task penjadwalan hari ini. |
|
rule_count |
int |
Jumlah aturan yang dikonfigurasi. |
|
enabled_rule_count |
int |
Jumlah aturan yang diaktifkan. |
|
high_severity_rule_count |
int |
Jumlah aturan tingkat keparahan tinggi yang dikonfigurasi. |
|
normal_severity_rule_count |
int |
Jumlah aturan tingkat keparahan normal yang dikonfigurasi. |
|
rule_instance_count |
int |
Jumlah instans aturan hari ini. |
|
high_severity_rule_instance_count |
int |
Jumlah instans aturan tingkat keparahan tinggi hari ini. |
|
normal_severity_rule_instance_count |
int |
Jumlah instans aturan tingkat keparahan normal hari ini. |
|
high_severity_rule_instance_pass_count |
int |
Jumlah pemeriksaan aturan tingkat keparahan tinggi yang berhasil hari ini. |
|
high_severity_rule_instance_warn_count |
int |
Jumlah pemeriksaan aturan tingkat keparahan tinggi yang memicu peringatan hari ini. |
|
high_severity_rule_instance_error_count |
int |
Jumlah pemeriksaan aturan tingkat keparahan tinggi yang memicu error hari ini. |
|
high_severity_rule_instance_fail_count |
int |
Jumlah pemeriksaan aturan tingkat keparahan tinggi yang gagal hari ini. |
|
normal_severity_rule_instance_pass_count |
int |
Jumlah pemeriksaan aturan tingkat keparahan normal yang berhasil hari ini. |
|
normal_severity_rule_instance_warn_count |
int |
Jumlah pemeriksaan aturan tingkat keparahan normal yang memicu peringatan hari ini. |
|
normal_severity_rule_instance_error_count |
int |
Jumlah pemeriksaan aturan tingkat keparahan normal yang memicu error hari ini. |
|
normal_severity_rule_instance_fail_count |
int |
Jumlah pemeriksaan aturan tingkat keparahan normal yang gagal hari ini. |
|
dt |
string |
Partisi tanggal dalam format YYYYMMDD. Nilainya dapat berkisar dari 31 hari sebelum tanggal saat ini hingga satu hari sebelum tanggal saat ini, sesuai dengan rentang [TODAY-31D, TODAY-1D]. |
Metadata contoh
Detail metrik tabel (table_metrics_detail)
|
Parameter |
Type |
Description |
|
datasource_type |
string |
Tipe sumber data. |
|
datasource_id |
string |
ID sumber data. |
|
catalog_name |
string |
Nama katalog data. |
|
database_name |
string |
Nama database. |
|
schema_name |
string |
Nama skema. |
|
table_name |
string |
Nama tabel. |
|
table_uuid |
string |
UUID tabel, digunakan untuk mengakses halaman detailnya. |
|
meta_entity_id |
string |
ID tabel yang dapat dibaca manusia. |
|
content_size |
bigint |
Ukuran penyimpanan yang dikumpulkan. Nilai ini adalah |
|
daily_rate_cs |
decimal(16,6) |
Tingkat perubahan harian ukuran penyimpanan. |
|
avg_content_size_7d |
bigint |
Rata-rata ukuran penyimpanan selama 7 hari. |
|
daily_rate_acs_7d |
decimal(16,6) |
Tingkat perubahan harian rata-rata ukuran penyimpanan selama 7 hari. |
|
latest_data_update_time_31d |
bigint |
Stempel waktu pembaruan data terbaru dalam 31 hari terakhir. Waktu ini berasal dari waktu akhir instans hilir yang sesuai dalam alur data dan merepresentasikan |
|
latest_data_update_task_id |
bigint |
ID task penjadwalan yang paling baru memperbarui tabel dalam 31 hari terakhir. |
|
latest_data_update_instance_id |
bigint |
ID instans task penjadwalan yang paling baru memperbarui tabel dalam 31 hari terakhir. |
|
latest_data_update_time_by_task |
bigint |
Waktu akhir instans task penjadwalan yang paling baru memperbarui tabel dalam 31 hari terakhir. |
|
writing_task_ids |
array<bigint> |
Daftar unik ID task penjadwalan yang menulis ke tabel pada tanggal bisnis saat ini. |
|
writing_task_ids_31d |
array<bigint> |
Daftar unik ID task penjadwalan yang menulis ke tabel dalam 31 hari terakhir. |
|
latest_data_access_time_31d |
bigint |
Stempel waktu akses data terbaru dalam 31 hari terakhir. Waktu ini berasal dari waktu akhir instans hulu yang sesuai dalam alur data dan merepresentasikan |
|
latest_data_access_task_id |
bigint |
ID task penjadwalan yang paling baru membaca dari tabel dalam 31 hari terakhir. |
|
latest_data_access_instance_id |
bigint |
ID instans task penjadwalan yang paling baru membaca dari tabel dalam 31 hari terakhir. |
|
latest_data_access_time_by_task |
bigint |
Waktu akhir instans task penjadwalan yang paling baru membaca dari tabel dalam 31 hari terakhir. |
|
reading_task_ids |
array<string> |
Daftar unik ID task penjadwalan yang membaca dari tabel pada tanggal bisnis saat ini. |
|
reading_task_ids_31d |
array<string> |
Daftar unik ID task penjadwalan yang membaca dari tabel dalam 31 hari terakhir. |
|
direct_downstream_tables |
array<string> |
Daftar UUID tabel hilir langsung. |
|
direct_upstream_tables |
array<string> |
Daftar UUID tabel hulu langsung. |
|
dt |
string |
Partisi tanggal, dalam format YYYYMMDD. Nilai yang valid berada dalam rentang [TODAY-31D, TODAY-1D]. |
Rangkuman metrik tabel (table_metrics_summary)
|
Parameter |
Type |
Description |
|
table_count |
bigint |
Jumlah tabel. |
|
daily_rate_tc |
decimal(16,6) |
Tingkat perubahan harian jumlah tabel. |
|
avg_table_count_7d |
bigint |
Rata-rata jumlah tabel selama 7 hari. |
|
daily_rate_atc_7d |
decimal(16,6) |
Tingkat perubahan harian rata-rata jumlah tabel selama 7 hari. |
|
content_size |
bigint |
Ukuran penyimpanan yang dikumpulkan. Nilai ini adalah |
|
daily_rate_cs |
decimal(16,6) |
Tingkat perubahan harian ukuran penyimpanan. |
|
avg_content_size_7d |
bigint |
Rata-rata ukuran penyimpanan selama 7 hari. |
|
daily_rate_acs_7d |
decimal(16,6) |
Tingkat perubahan harian rata-rata ukuran penyimpanan selama 7 hari. |
|
updated_table_count |
bigint |
Jumlah tabel yang diperbarui dalam 31 hari terakhir. |
|
daily_rate_utc |
decimal(16,6) |
Tingkat perubahan harian jumlah tabel yang diperbarui dalam 31 hari terakhir. |
|
avg_updated_table_count_7d |
bigint |
Rata-rata jumlah tabel yang diperbarui dalam 31 hari terakhir selama 7 hari. |
|
daily_rate_autc_7d |
decimal(16,6) |
Tingkat perubahan harian rata-rata jumlah tabel yang diperbarui dalam 31 hari terakhir selama 7 hari. |
|
accessed_table_count |
bigint |
Jumlah tabel yang dibaca dalam 31 hari terakhir. |
|
daily_rate_atc |
decimal(16,6) |
Tingkat perubahan harian jumlah tabel yang dibaca dalam 31 hari terakhir. |
|
avg_accessed_table_count_7d |
bigint |
Rata-rata jumlah tabel yang dibaca dalam 31 hari terakhir selama 7 hari. |
|
daily_rate_aatc_7d |
decimal(16,6) |
Laju perubahan harian dari rata-rata 7 hari jumlah tabel yang dibaca dalam 31 hari terakhir. |
|
dt |
string |
Partisi tanggal, dalam format YYYYMMDD. Nilai yang valid berada dalam rentang [TODAY-31D, TODAY-1D]. |
Detail metrik task (task_metrics_detail)
|
Parameter |
Type |
Description |
|
task_id |
bigint |
ID task penjadwalan. |
|
workflow_id |
bigint |
ID alur kerja. |
|
node_type |
bigint |
Tipe node. |
|
project_id |
bigint |
ID ruang kerja. |
|
week_number |
bigint |
Nomor minggu tanggal bisnis dalam tahun. |
|
task_owner |
string |
ID pemilik. |
|
compute_resource_type |
string |
Tipe sumber daya komputasi. |
|
compute_resource_id |
string |
ID sumber daya komputasi, seperti nama proyek MaxCompute, ID kluster E-MapReduce (EMR), atau ID instans Hologres. |
|
datasource_name |
string |
Nama sumber data. |
|
inst_success_count |
bigint |
Jumlah instans yang berhasil. |
|
inst_failed_count |
bigint |
Jumlah instans yang gagal. |
|
inst_running_count |
bigint |
Jumlah instans yang sedang berjalan. |
|
inst_abnormal_count |
bigint |
Jumlah instans yang abnormal. |
|
inst_not_started_count |
bigint |
Jumlah instans yang belum dimulai. |
|
inst_runtime_cu |
double |
Total CUs yang dikonsumsi oleh instans task pada tanggal bisnis. |
|
task_avg_cu_31d |
double |
Rata-rata konsumsi CU harian task selama 31 hari terakhir. |
|
dt |
string |
Partisi tanggal, dalam format YYYYMMDD. Nilai yang valid berada dalam rentang [TODAY-31D, TODAY-1D]. |
Rangkuman metrik task (task_metrics_summary)
|
Parameter |
Type |
Description |
|
node_type |
bigint |
Tipe node. |
|
inst_status |
string |
Status instans. |
|
inst_count |
bigint |
Jumlah instans. |
|
avg_inst_count_7d |
double |
Rata-rata jumlah instans selama 7 hari. |
|
granularity |
string |
Granularitas statistik. Nilai yang valid: |
|
dt |
string |
Partisi tanggal, dalam format YYYYMMDD. Nilai yang valid berada dalam rentang [TODAY-31D, TODAY-1D]. |