全部產品
Search
文件中心

DataWorks:功能發布記錄

更新時間:May 15, 2026

本文為您介紹DataWorks產品功能和相應文檔的發布動態。

2026年

2026年04月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

DataWorks基於OpenClaw架構,構建使用者專屬的AI助理

DataWorks基於OpenClaw架構,構建使用者專屬的AI助理。

2026-04-30

華北3(張家口)、華北2(北京)、華北6(烏蘭察布)、華東1(杭州)、華東2(上海)、華南1(深圳)、西南1(成都)、中國香港、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、日本(東京)

DataWorks所有使用者

DataWorks智能助手概述

標準版、專業版的OpenAPI免費額度上調、超額後隨用隨付

DataWorks標準版、專業版使用者,取消每日調用API的數量限制;標準版調用API的免費額度調整為10萬次/月,專業版為50萬次/月,超出部分按OpenAPI隨用隨付;基礎版和企業版保持不變;各版本QPS限制保持不變。詳見阿里雲公告。

2026-04-23

所有地區

DataWorks所有使用者

使用DataWorks OpenAPI

產品公告

2026年03月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

MySQL整庫離線至DLF(Paimon)

支援MySQL整庫離線同步至DLF,目標格式為Paimon。

2026-03-26

所有地區

DataWorks所有使用者

/

工作空間從簡單模式升級到標準模式

支援工作空間從簡單模式升級到標準模式,支援已經開啟DataStudio新版IDE的工作空間。

2026-03-26

所有地區

DataWorks所有使用者

/

DLF 表支援資料許可權申請功能

DLF支援資料許可權申請功能,使用者可在資料地圖中直接發起資料存取權限申請流程。

2026-03-26

所有地區

DataWorks所有使用者

/

DLF表支援基於Serverless Spark的資料預覽

DLF支援基於Serverless Spark的資料預覽,使用者可基於在DataWorks中的Spark計算資源與自訂查詢指令碼快速預覽相關資料。

2026-03-26

所有地區

DataWorks所有使用者

/

ChatBI提供深度分析模式

DataWorks ChatBI新增深度分析模式,支援多維下鑽、根因分析、時序對比、異常檢測、智能歸因等,適用於探索性分析情境。

2026-03-26

華北3(張家口)、西南1(成都)、華南1(深圳)、華北2(北京)、華東1(杭州)、華東2(上海)、中國香港、印尼(雅加達)

DataWorks所有使用者

/

資料服務支援雲原生API Gateway

DataWorks資料服務新增支援雲原生API Gateway,可通過嚮導模式或指令碼模式封裝資料API,並一鍵發布至雲原生API Gateway,提供線上調用服務。

2026-03-26

所有地區

DataWorks所有使用者

使用雲原生API Gateway建立API

DataWorks支援Serverless Spark的高可用HA Kyuubi Gateway

已綁定至DataWorks作為計算資源的Serverless Spark若開啟高可用,Serverless Spark SQL與Serverless Kyuubi任務均可通過高可用的Kyuubi Gateway提交至計算資源運行。

2026-03-26

所有地區

DataWorks所有使用者

/

資料分析面向Hologres、ClickHouse、MySQL資料來源提供全量資料查詢模式

DataWorks資料分析支援面向Hologres、ClickHouse、MySQL資料來源提供全量資料查詢模式,適用於單次查詢超過10000條或10MB的巨量資料量查詢與分析情境。

2026-03-26

所有地區

DataWorks所有使用者

/

2026年02月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

資料開發SQL節點支援配置品質測試規則

資料開發MaxCompute SQL節點支援配置品質測試規則,可用以校正該節點產出的開發及生產資料表。此功能將品質規則的定義、測試與SQL開發流程深度融合,旨在解決傳統模式下品質規則配置滯後、資料問題發現延遲及規則維護成本高的問題。

2026-02-20

所有地區

DataWorks所有使用者

配置資料品質測試

資料開發SQL節點支援資料治理事前深度檢查

資料開發SQL節點支援資料治理事前深度檢查,可基於AI能力定義自訂規則,在編碼時即時發現並修複代碼問題,提升代碼品質和資料安全。

2026-02-20

所有地區

DataWorks所有使用者

節點開發問題診斷和治理

營運中心Agent

DataWorks資料營運Agent支援AI全鏈路診斷,可輸出結構化診斷報告,並支援在對話方塊中直接執行重跑、修改資源群組等營運操作(需人工確認),提升資料營運效率。

2026-02-20

華北2(北京)、華北3(張家口)、華北6(烏蘭察布)、華東1(杭州)、華東2(上海)、華南1(深圳)、西南1(成都)、中國香港、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、日本(東京)

DataWorks所有使用者

資料營運Agent

資料開發支援離職轉交

資料開發支援離職轉交功能,協助企業在員工離職時平穩轉移資料開發相關資產。

2026-02-20

華東1(杭州)、華東2(上海)、華北2(北京)、華北3(張家口)、華北6(烏蘭察布)、華南1(深圳)、西南1(成都)、中國香港、日本(東京)、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、泰國(曼穀)、德國(法蘭克福)、英國(倫敦)、美國(矽谷)、美國(維吉尼亞)

DataWorks所有使用者

/

營運助手支援批量營運

DataWorks營運助手支援批量營運,使用者可以手動填寫或者上傳檔案,對檔案中的所有執行個體進行批量營運操作。

2026-02-20

華北6(烏蘭察布)

DataWorks所有使用者

/

2025年

2025年12月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

Data Integration能力增強

  • 支援Postgres SQL整庫即時同步至Lindorm,全量同步結束後自動啟動即時增量;

  • 支援Postgres SQL整庫即時同步至AnalyticDB for MySQL,全量同步結束後自動啟動即時增量;

  • 支援Hive整庫離線同步至DLF,支援全量、增量的一次性或者周期性同步。

2025-12-20

所有地區

DataWorks所有使用者

資料地圖新增支援Paimon Catalog、 MongoDB 中繼資料採集

DataWorks新增Paimon Catalog中繼資料採集,支援使用非DLF+自建Paimon Catalog(on OSS FileSystem)的客戶進行中繼資料的採集管理與詳情查看;支援 MongoDB 中繼資料周期採集,協助資料開發快速發現、理解和管理 MongoDB 中的集合(Collection)、欄位結構,提升半結構化資料資產的可見度與治理效率。

2025-12-20

所有地區

DataWorks所有使用者

中繼資料採集

開放資料新增資料品質開放資料檢視

基於DataWorks的開放資料(Open Data),上線品質執行個體視圖,支援使用者MaxCompute SQL查詢資料品質每日執行個體情況及統計指標,進行自訂品質多維度分析。

2025-12-20

所有地區

DataWorks企業版使用者

開放資料表結構詳情

2025年11月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

for-each節點支援多並發

for-each節點支援配置執行策略為串列執行還是並存執行。

2025-11-27

所有地區

DataWorks所有使用者

for-each節點

新增Dependent節點

DataWorks新增Dependent節點,通過Dependent節點可以配置跨多周期的複雜依賴。

2025-11-27

所有地區

DataWorks所有使用者

依賴檢查節點

Notebook新增支援ADB Spark計算資源

在DataWorks Notebook中,可通過Magic Command快捷串連至ADB Spark計算資源,實現PySpark資料開發情境。

2025-11-27

所有地區

DataWorks所有使用者

Notebook 進階開發

資料分析SQL查詢結果支援匯出至Object Storage Service

在資料分析SQL查詢中運行產生查詢結果,可通過匯出>Object Storage Service按鈕來快捷匯出,實現資料歸檔與複用。

2025-11-27

所有地區

DataWorks所有使用者

匯出與分享

Data Integration支援公用資料來源作為來源

Data Integration支援公用資料來源作為資料來源,可以單表離線同步到任意支援的目的端。

2025-11-20

所有地區

DataWorks所有使用者

公用資料集資料來源

Data Integration能力增強

  • 支援Hologres單表即時同步至Lindorm寬表;

  • 支援單表離線寫入AWS S3;

  • 支援Postgres SQL整庫即時同步至MaxCompute DeltaTable;

  • 支援DataBricks資料來源單表離線讀取;

  • 支援Kafka單表即時同步至Lindorm;

  • 支援OceanBase整庫即時同步至Hologres。

2025-11-20

所有地區

DataWorks所有使用者

Data Integration概述

2025年10月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

資料開發支援串連本地編輯器

支援開發人員使用其熟悉的本地IDE進行雲端專案開發,兼顧個人開發習慣與雲端協作、版本管理的雙重優勢。

2025-10-25

華北3(張家口)、華北6(烏蘭察布)、華北2(北京)、華東1(杭州)、華東2(上海)、華南1(深圳)、西南1(成都)、馬來西亞(吉隆坡)、印尼(雅加達)、泰國(曼穀)、日本(東京)、美國(矽谷)、德國(法蘭克福)、英國(倫敦)、美國(維吉尼亞)、中國香港、新加坡

使用新版資料開發(Data Studio)的使用者

/

新版IDE與Git之間的代碼互連

完成了代碼自動同步至 Git 及從 Git 合并至 Data Studio 的支援,此功能將為企業級客戶提供完整的 DevOps 支援,強化團隊協作能力。

2025-10-25

華北3(張家口)、華北6(烏蘭察布)、華北2(北京)、華東1(杭州)、華東2(上海)、華南1(深圳)、西南1(成都)、馬來西亞(吉隆坡)、印尼(雅加達)、泰國(曼穀)、日本(東京)、美國(矽谷)、德國(法蘭克福)、英國(倫敦)、美國(維吉尼亞)、中國香港、新加坡

使用新版資料開發(Data Studio)的使用者

Git代碼同步與合并

新增Serverless Spark/StarRocks 節點

OpenLake 全面適配,完成了對 OpenLake 工作空間的適配,新增 Serverless Spark/StarRocks 節點,為 OpenLake 使用者帶來無縫、高效的開發體驗。

2025-10-25

華北3(張家口)、華北6(烏蘭察布)、華北2(北京)、華東1(杭州)、華東2(上海)、華南1(深圳)、西南1(成都)、馬來西亞(吉隆坡)、印尼(雅加達)、泰國(曼穀)、日本(東京)、美國(矽谷)、德國(法蘭克福)、英國(倫敦)、美國(維吉尼亞)、中國香港、新加坡

使用新版資料開發(Data Studio)的使用者

資料開發 Agent

資料開發 Agent,具備端到端自主開發能力, 能夠基於使用者提交的需求文檔,自主完成從任務規划到最終發布的完整ETL開發流程,輔助需求分析、代碼產生、工作流程產生、調度配置與發布,旨在極大提升開發體驗、降低代碼錯誤率並縮短專案交付周期。

2025-10-25

華北3(張家口)華北2(北京)、華北6(烏蘭察布)、華東1(杭州)、華東2(上海)、華南1(深圳)、西南1(成都)、中國香港、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、日本(東京)

使用新版資料開發(Data Studio)的使用者

資料開發Agent

Copilot Rule規則引擎

Copilot Rule 規則引擎上線,允許使用者根據團隊規範或個人偏好影響Agent業務效果。通過靈活的規則配置,更好地滿足企業級情境下的標準化與個人化需求。

2025-10-25

華北3(張家口)華北2(北京)、華北6(烏蘭察布)、華東1(杭州)、華東2(上海)、華南1(深圳)、西南1(成都)、中國香港、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、日本(東京)

使用新版資料開發(Data Studio)的使用者

規則配置

多模態資料集搜尋

DataWorks支援租戶級搜尋已管理的多模態資料集,可對DataWorks中建立管理的資料集及PAI資料集進行統一搜尋及查看。對已建立標籤及索引的PAI資料集,可針對資料集詳情支援語義搜尋。

2025-10-17

所有地區

發布地區的所有使用者

/

新增大模型節點

大模型節點,通過整合大模型,為開發人員提供智能資料處理與分析能力,顯著降低技術門檻,賦能更多業務人員參與資料工作。

2025-10-17

華東1(杭州)、華東2(上海)、華北2(北京)、華北6(烏蘭察布)、華南1(深圳)、中國香港、日本(東京)、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、德國(法蘭克福)、美國(矽谷)和美國(維吉尼亞)

使用新版資料開發(Data Studio)的使用者

大模型節點

DataWorks開放資料

DataWorks開放資料(DataWorks OpenData)為您提供集中、統一且易用的中繼資料集合,涵蓋當前租戶下的表、任務節點、執行個體、工作空間、成員及專案等對象的詳細資料。通過將開放資料安裝到綁定MaxCompute計算資源的工作空間中,您可以在資料開發與分析中利用MaxCompute Package視圖授權共用中繼資料,快速擷取標準化、可追溯的中繼資料,從而實現高效的資料治理與分析。

2025-10-14

所有地區

DataWorks企業版使用者

2025年09月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

Data Integration能力增強

  • 支援Hologres 到 MaxCompute 的單表即時同步;

  • 支援在單表離線讀取lindorm lceberg表裡的資料,方便資料湖內資料流出應用;

  • 支援在單表離線讀取DLF裡的資料,方便資料湖內資料流出應用;

  • 支援OceanBase分庫分表單表離線同步到MaxCompute。

2025-09-22

所有地區

發布地區的所有使用者

Data Integration概述

Data Integration警示規則模版

支援在Data Integration主站裡配置警示模版,方便一個警示配置給多個任務使用,提升使用者配置警示的效率。

2025-09-22

所有地區

發布地區的所有使用者

公用警示規則

資料處理大模型支援自訂模型

支援在Data Integration單表離線資料處理中的AI輔助處理能力上配置自訂的大模型,方便客戶使用自己訓練的模型來進行AI相關工作。

2025-09-22

所有地區

發布地區的所有使用者

AI輔助處理

Data Integration處理支援Embedding

Data Integration的單表離線同步中的資料處理功能推出Embedding向量化功能,支援將分散在OSS、MaxCompute、HDFS等異構來源中的資料幫浦並轉化為向量,寫入Milvus、Elasticsearch、Opensearch等向量庫,以及Hologres向量表等具備向量儲存能力的目標端,能夠大幅簡化ETL流程,高效實現知識向量化,助力RAG等AI情境落地。

2025-09-22

所有地區

發布地區的所有使用者

向量化處理

DataWorks資源群組支援部署使用大模型服務

DataWorks大模型服務為您提供高效部署、安全通訊與便捷調用的一站式能力,您可以基於DataWorks的Serverless資源群組輕鬆完成模型部署,並直接在資料開發工作單位中調用模型,所有流量均通過PrivateLink建立的私網通道傳輸,確保資料全程不出域,從而有效保障資料安全性。

2025-09-22

華東1(杭州)、華東2(上海)、華北2(北京)、華北6(烏蘭察布)、華南1(深圳)、中國香港、日本(東京)、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、德國(法蘭克福)、美國(矽谷)和美國(維吉尼亞)

發布地區的所有使用者

2025年08月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

EMR Serverless Spark計算資源新增支援Open LADP和EMR Kyuubi

EMR Serverless Spark計算資源新增支援Open LDAP帳號映射和Kyuubi配置,便於您更高效地進行許可權管理,同時基於EMR Serverless Spark計算資源實現EMR Kyuubi節點任務的開發。

2025-08-14

所有地區

使用新版資料開發(Data Studio)的使用者

綁定EMR Serverless Spark計算資源

Notebook節點新增Magic快捷串連命令

在Notebook開發過程中,支援在Python儲存格中通過Magic命令來快捷建立並啟動Livy服務,從而串連至MaxCompute Spark和EMR Serverless Spark計算資源,實現高效開發與調試。

2025-08-07

所有地區

使用新版資料開發(Data Studio)的使用者

Notebook 基礎開發

2025年07月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

資料開發節點調度配置新增計算配額參數

Data Studio支援在MaxCompute SQL節點、MaxCompute Script節點的調度配置設定計算配額。

2025-07-31

所有地區

使用新版資料開發(Data Studio)的使用者

節點調度配置

資料開發新增複製和版本還原功能

Data Studio支援對工作流程、節點及組件等資料對象進行複製與版本還原作業,便於快速複用與歷史版本恢複。

2025-07-31

所有地區

使用新版資料開發(Data Studio)的使用者

使用資料集

Data Studio支援在Shell節點、Python節點、Notebook和個人開發環境中使用資料集。

2025-07-28

所有地區

使用新版資料開發(Data Studio)的使用者

使用資料集

管理資料集

DataWorks新增支援資料集功能,能夠實現對非結構化資料(如映像、文檔)的版本管理控制。

2025-07-28

所有地區

所有使用者

管理資料集

資料保護傘

資料保護傘功能入口調整。

調整前:全部產品 > 數據治理 > 資料保護傘

調整後:全部產品 > 數據治理 > 安全中心,在資訊安全中心左側導覽列單擊敏感數據管理

2025-07-10

華東2(上海)、華南1(深圳)、華北2(北京)、西南1(成都)

發布地區的所有使用者

-

資料開發新增觸發式工作流程

適用於無固定調度周期的情境,可通過手動或事件觸發運行觸發式工作流程。

2025-07-07

華東1(杭州)、華北6(烏蘭察布)、華南1(深圳)

使用新版資料開發(Data Studio)的使用者

2025年06月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

隨用隨付資源群組轉訂用帳戶

支援將隨用隨付的Serverless資源群組轉為訂用帳戶的付費模式。

2025-06-19

所有地區

所有使用者

使用Serverless資源群組

資料同步

資料來源為MySQL或PolarDB,資料去向為MaxCompute的整庫即時同步任務,支援在目標表欄位賦值時使用函數運算式定義賦值。

2025-06-11

所有地區

所有使用者

使用函數運算式為目標表欄位賦值

PAIFlow

PAI Flow提供端到端機器學習流程開發能力,可實現與人工智慧平台 PAI 的可視化建模 Desiger相同的工作流程功能,並能周期性調度工作流程。

2025-06-10

華東1(杭州)、華東2(上海)、華北2(北京)、華北6(烏蘭察布)、華南1(深圳)、中國香港、新加坡、印尼(雅加達)、日本(東京)、德國(法蘭克福)、美國(矽谷)、美國(維吉尼亞)

使用新版資料開發(Data Studio)的使用者

PAI Flow節點

煙霧測試 (Smoke Test)

資料開發(Data Studio)(新版)新增支援煙霧測試 (Smoke Test),驗證調度節點任務的參數替換邏輯及執行結果是否符合預期,避免基礎配置錯誤影響線上資料。

2025-06-10

所有地區

所有使用者

煙霧測試 (Smoke Test)

營運大屏新增手動任務

支援在營運大屏查看手動商務程序和內部任務執行個體的任務運行情況。

2025-06-04

所有地區

所有使用者

查看營運大屏

2025年05月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

個人開發環境

支援在個人開發環境建立DataWorks自訂鏡像時,同步產生MaxCompute的自訂鏡像。

2025-05-23

所有地區

使用新版資料開發(Data Studio)的使用者

個人開發環境製作MaxCompute鏡像

程式碼檢閱

程式碼檢閱旨在通過人工幹預最佳化生產代碼,以提升生產調度任務的代碼品質,確保生產環境中的代碼符合規範。根據業務管理要求,決定是否在任務發布至生產環境之前強制進行人工程式碼檢閱。一旦開啟強制程式碼檢閱,只有通過評審的任務才能發布至生產環境。

2025-05-23

所有地區

使用新版資料開發(Data Studio)的使用者

程式碼檢閱

2025年04月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

新增DataWorks On Lindorm使用

新增支援在工作空間中綁定Lindorm計算資源,通過Lindorm Spark和Lindorm Spark SQL節點進行任務開發,可以在資料地圖中管理和維護Lindorm的資料血緣關係。

2025-04-18

華東1(杭州)、華東2(上海)、華北2(北京)、華南1(深圳)

使用新版資料開發(Data Studio)的使用者

Data Integration

MongoDB資料來源新增支援6.x和7.x版本。

2025-04-14

所有地區

所有使用者

MongoDB資料來源

Data Studio/資料開發

新增支援MaxCompute與Hologres間的中繼資料映射和資料同步。

2025-04-10

所有地區

所有使用者

Data Studio/資料開發

DataWorks Agent上線,支援通過自然語言互動完成資料開發工作單位。

2025-04-08

所有地區

所有使用者

基於三方用戶端的DataWorks Agent

2025年03月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

Data Integration

支援Milvus資料來源。

2025-03-27

所有地區

所有使用者

Milvus資料來源

Data Integration

支援MySQL整庫即時同步至LogHub(SLS)。

2025-03-12

所有地區

所有使用者

MySQL整庫即時同步至LogHub(SLS)

營運中心

支援Copilot智能搜尋和視圖儲存功能。

2025-03-03

所有地區

所有使用者

2025年02月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

營運中心

支援通過公網訪問智能診斷任務執行日誌中的內網EMR Web UI。

2025-02-26

華東1(杭州)、華東2(上海)、華北2(北京)、華北3(張家口)、華南1(深圳)、中國香港、日本(東京)、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、德國(法蘭克福)、美國(矽谷)、美國(維吉尼亞)、阿聯酋(杜拜)

DataWorks專業版及以上版本使用者

智能診斷

營運中心

開啟基準時,支援在資料開發EMR節點配置ENABLE_TASK_PRIORITY參數,以控制調度情境下YARN隊列的優先順序。

2025-02-14

所有地區

所有使用者

設定基準優先順序與YARN隊列優先順序的映射關係

Data Studio/資料開發

資料開發PyODPS 3節點支援升級PyODPS版本。

2025-02-14

所有地區

所有使用者

智能助手(Copilot)

DataWorks Copilot支援DeepSeek模型(DeepSeek-R1-671BDeepSeek-R1-Distill-Qwen-32B)。

2025-02-14

華東1(杭州)、華東2(上海)、華北2(北京)、華北3(張家口)、華南1(深圳)、西南1(成都)

所有使用者

代碼編程助手

智能助手(Copilot)

DataWorks Copilot新增支援代碼最佳化和代碼測試功能。

2025-02-14

華東1(杭州)、華東2(上海)、華北2(北京)、華北3(張家口)、華南1(深圳)、西南1(成都)、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)

所有使用者

代碼編程助手

個人開發環境

  • 個人開發環境執行個體支援基於GPU鏡像建立,適用於TensorFlow、PyTorch等深度學習架構。

  • 個人開發環境執行個體支援設定空間級自動關機策略以及配置定時關機。

2025-02-12

所有地區

使用新版資料開發(Data Studio)的使用者

個人開發環境

營運中心

自動營運新增自動重跑策略。

2025-02-10

所有地區

所有使用者

自動營運

資料開發新增節點

SUB_PROCESS是一種特殊的任務類型,它可以在工作流程內引用另一個已定義的工作流程工作。這種任務類型適用於將複雜的任務分解為多個子任務,每個子任務可以獨立定義和管理,從而提高任務的可維護性和可重用性。

2025-02-06

所有地區

使用新版資料開發(Data Studio)的使用者

SUB_PROCESS節點

2025年01月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

資料來源

支援PolarDB-O(分庫分表)資料來源。

2025-01-14

所有地區

所有使用者

分庫分表同步

舊版資源群組支援可用性區域置換

增強資源容災相關的能力,支援更加快捷方便地應對故障。

2025-01-02

所有地區

所有使用者

2024年

12月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

資料開發新增節點

資料開發新增ADB Spark SQL節點,該節點可進行AnalyticDB Spark SQL任務的開發和周期性調度,以及與其他作業的整合操作。

2024-12-19

所有地區

使用新版資料開發(Data Studio)的使用者

ADB Spark SQL節點

資料開發新增節點

資料開發新增ADB Spark節點,該節點可進行AnalyticDB Spark任務的開發和周期性調度,以及與其他作業的整合操作。

2024-12-19

所有地區

使用新版資料開發(Data Studio)的使用者

ADB Spark節點

Hologres動態表使用

DataWorks資料目錄融合了Hologres動態表引擎的功能,提供了一套視覺化檢視用於動態表管理、調度依賴以及任務維護等操作。

2024-12-13

所有地區

使用新版資料開發(Data Studio)的使用者

使用Hologres動態表

資料來源

支援TiDB資料來源。

2024-12-04

所有地區

所有使用者

TiDB資料來源

資料品質

資料品質新增格式匹配類品質校正模板,可以自訂Regex,定義期望的資料內容格式。內建郵箱、電話號碼、手機號碼、社會安全號碼等常見內容有效性校正模板。

2024-12-02

所有地區

所有使用者

查看內建規則模板

11月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

Data Integration

支援ApsaraDB for OceanBase的OceanBase MySQL租戶整庫即時同步至MaxCompute。

2024-11-21

所有地區

所有使用者

ApsaraDB for OceanBase整庫即時同步至MaxCompute

資料地圖

資料地圖中繼資料採集支援採集並管理AnalyticDB for Spark中繼資料。

2024-11-21

所有地區

使用新版資料開發(Data Studio)的使用者

中繼資料採集

資料地圖

支援在資料地圖的MaxCompute表詳情頁建立資料洞察,通過深度資料分析和解讀來擷取資料統計及分布情況。

2024-11-21

華東1(杭州)、華東2(上海)、華南1(深圳)、西南1(成都)、華北1(張家口)、華北2(北京)、華北6(烏蘭察布)

所有使用者

MaxCompute表資料

資料資產治理

資料治理中心升級為資料資產治理,可根據預先配置的治理計劃,自動探索平台使用過程中資料存放區、任務計算、代碼開發、資料品質等維度存在的問題,通過健康分量化評估,從多個視角呈現治理成果,協助您高效達成治理目標。同時,還提供業務資產管理、資產分析、任務資源消耗明細、費用預估等功能,協助您有效掌握各類資源的使用詳情。

2024-11-14

華東1(杭州)、華東2(上海)、華北2(北京)、華北3(張家口)、華南1(深圳)、西南1(成都)、中國香港、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、德國(法蘭克福)、美國(矽谷)、美國(維吉尼亞)

所有使用者

資料資產治理

計算資源

支援綁定AnalyticDB for Spark計算資源。

2024-11-05

所有地區

使用新版資料開發(Data Studio)的使用者

綁定計算資源

個人開發環境串連Git

支援個人開發環境與Git倉庫整合,便於代碼版本管理和團隊協作。

2024-11-04

所有地區

使用新版資料開發(Data Studio)的使用者

個人開發環境串連Git倉庫

10月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

鏡像管理

DataWorks支援將自訂鏡像構建為持久化鏡像,無需每次都重新部署鏡像環境,每次運行任務節點時使用同一個鏡像環境,不僅確保了運行環境的一致性,還有效節省了任務已耗用時間、計算成本和流量成本。

2024.10.18

華北2(北京)、華東2(上海)、華南1(深圳)、華東1(杭州)、中國香港、華北3(張家口)、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、日本(東京)、德國(法蘭克福)、英國(倫敦)、美國(矽谷)、美國(維吉尼亞)

所有DataWorks使用者

自訂鏡像

Serverless同步任務

Data Integration新增Serverless同步任務類型,無資源群組概念,您只需關注同步業務本身。

2024.10.12

華東1(杭州)、華東2(上海)、華北2(北京)、華北3(張家口)、華南1(深圳)、中國香港、英國(倫敦)、美國(矽谷)、美國(維吉尼亞)、日本(東京)、德國(法蘭克福)、馬來西亞(吉隆坡)

所有DataWorks使用者

Serverless同步任務配置

09月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

即時同步任務

支援LogHub(SLS)單表即時入湖至Data Lake Formation 2.0,以Paimon格式寫入表資料,支援中間做簡單的資料處理。

2024.9.13

所有地區

所有DataWorks使用者

LogHub(SLS)單表即時入湖至Data Lake Formation

即時同步任務

支援即時同步任務在運行中動態調整佔用的資源大小,無需停止任務,可以設定調整計劃,按時進行調整。

2024.9.13

所有地區

所有DataWorks使用者

資源調優動態擴縮容條件說明

08月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

即時同步任務

新增支援MySQL整庫即時同步至SelectDB或Apache Doris。

2024.8.29

所有地區

所有DataWorks使用者

MySQL整庫即時同步至SelectDB

Hologres資料存取權限控制

DataWorks資訊安全中心為您提供訪問Hologres資料時的許可權管控能力,包括設定授權身份、許可權申請、許可權審批,還支援您查看許可權申請記錄、許可權審批記錄。

2024.8.22

所有地區

所有DataWorks使用者

Hologres資料存取權限控制

SQL查詢結果匯出為DingTalk表格文檔

DataWorks在進行SQL查詢後,可直接通過DingTalk應用,將查詢結果以DingTalk文檔的形式匯出在DingTalk內,避免了將查詢資料下載為Excel檔案帶來的資料安全問題。

2024.8.14

華北3(張家口)

西南1(成都)

所有DataWorks使用者

匯出查詢結果至DingTalk

降低修改MaxCompute資料來源預設訪問身份的許可權要求

當MaxCompute資料來源的預設訪問身份為其他RAM子帳號時,由“需擁有RAM的AdministratorAccess許可權”調整為“需擁有MaxCompute專案的admin或super_administrator許可權”。

2024.8.8

所有地區

所有DataWorks使用者

綁定MaxCompute計算資源

企業版已支援雲SSO功能

DataWorks企業版支援雲SSO。通過阿里雲的雲SSO,您可以使用第三方或自建IdP(Identity Provider)登入阿里雲使用DataWorks。

2024.8.8

所有地區

所有DataWorks使用者

DataWorks各版本功能詳情

07月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

RAM權限原則更新

AliyunDataWorksReadOnlyAccess增加dataworks:ListUserResources許可權(即可查看使用者擁有的資源資訊)。

2024.7.10

所有地區

所有DataWorks使用者

註冊E-MapReduce叢集功能更新

在DataWorks註冊E-MapReduce叢集新增如下功能:

  • 支援自訂叢集的Kyuubi串連資訊。

  • 支援註冊EMR Serverless Spark類型叢集。

2024.7.10

目前僅華北3(張家口)地區支援使用EMR Serverless Spark。

所有DataWorks使用者

資料開發新增節點

資料開發新增CDH Spark SQL節點,該節點可進行CDH Spark SQL任務的開發和周期性調度,以及與其他作業的整合操作。

2024.7.10

所有地區

所有DataWorks使用者

CDH Spark SQL節點

06月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

Data Integration新增同步鏈路

Data Integration支援將MySQL資料通過整庫離線同步或整庫即時同步方式同步至StarRocks。

2024.06.28

所有地區

所有DataWorks使用者

資料開發支援資料推送節點

資料推送節點支援您在商務程序中,先通過上遊資料加工和資料處理任務來產出資料表;然後在下遊掛載資料推送節點,將上遊產出的資料結果通過訊息卡片的方式定時推送至DingTalk群或飛書群。

說明

使用資料推送節點,請提交工單聯絡技術支援人員升級調度資源群組。

2024.6.28

  • 華東1(杭州)

  • 華東2(上海)

  • 華北2(北京)

  • 華南1(深圳)

  • 西南1(成都)

  • 中國香港

  • 新加坡

  • 馬來西亞(吉隆坡)

  • 美國(矽谷)

  • 美國(維吉尼亞)

  • 德國(法蘭克福)

所有DataWorks使用者

最佳實務:資料開發工作流程中配置資料推送節點

DataWorks Serverless資源群組上線

為加強DataWorks功能間的資源管理並統一使用者體驗,DataWorks推出的Serverless資源群組涵蓋了原獨享調度資源群組、獨享Data Integration資源群組、獨享資料服務資源群組的核心功能,通過一個資源群組即可完成資料同步、任務調度運行、調用及管理API服務等操作。

2024.6.11

  • 華北2(北京)

  • 華東2(上海)

  • 華南1(深圳)

  • 華東1(杭州)

  • 中國香港

  • 華北3(張家口)

  • 新加坡

  • 馬來西亞(吉隆坡)

  • 印尼(雅加達)

  • 日本(東京)

  • 德國(法蘭克福)

  • 英國(倫敦)

  • 美國(矽谷)

  • 美國(維吉尼亞)

所有DataWorks使用者

新增“基於Lindorm計算引擎進行任務開發”最佳實務

Lindorm計算引擎相容CDH(Cloudera's Distribution Including Apache Hadoop)。您可在DataWorks上通過註冊CDH叢集並配置Lindorm計算引擎串連資訊的方式,在DataWorks上基於Lindorm計算引擎進行互動式SQL查詢、SQL任務開發、JAR任務執行等。

2024.6.5

所有地區

所有DataWorks使用者

基於Lindorm計算引擎進行任務開發

Data Integration新增資料來源

Data Integration新增支援Azure Blob Storage資料來源。

2024.6.3

所有地區

所有DataWorks使用者

Azure Blob Storage資料來源

05月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

MySQL資料來源支援OSS Binlog

Data IntegrationMySQL資料來源新增支援OSS Binlog。

在添加MySQL資料來源時,如果配置模式阿里雲數據庫(RDS),且RDS MySQL執行個體地區與DataWorks專案空間在同一地區,您可以開啟支援OSS binlog讀取,開啟後,在無法訪問RDS Binlog時,將會嘗試從OSS擷取Binlog,以避免即時同步任務中斷。

2024.5.24

所有地區

所有DataWorks使用者

MySQL資料來源

資料品質模組改版

資料品質改版,基於品質監控,結合具體的監控規則,對錶的具體資料範圍進行規則校正,最佳化資料品質監控流程。

2024.5.21

新版資料品質正在逐步上線中,具體支援地區請以實際控制台為準,如果您的業務所在地區暫時無法使用新版資料品質的相關功能,請參見資料品質文檔。

所有DataWorks使用者

新版資料品質

Data Integration新增同步鏈路

Data Integration支援將Hologres資料通過整庫離線同步方式同步至其他Hologres。

2024.5.20

所有地區

所有DataWorks使用者

Hologres整庫離線同步至Hologres

DataWorks支援遠程觸發伺服器指令碼執行

DataWorks的SSH節點可通過指定SSH資料來源的方式,在DataWorks遠端存取該資料來源串連的主機,並觸發指令碼在遠程主機執行。

2024.5.15

所有地區

所有DataWorks使用者

資料開發新增EMR Kyuubi節點

DataWorks的EMR Kyuubi節點可進行Kyuubi任務的開發和周期性調度,以及與其他作業的整合操作。

2024.5.11

所有地區

所有DataWorks使用者

EMR Kyuubi節點

資料開發新增多種資料庫類型節點

DataWorks的資料開發支援DRDS、PolarDB MySQL、Doris等多種類型的資料庫節點,您可基於該類節點執行相關任務的開發和周期性調度,以及與其他作業的整合操作。

2024.5.11

所有地區

所有DataWorks使用者

04月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

PostgreSQL資料來源配置支援SSL認證

Data Integration添加PostgreSQL資料來源時支援配置SSL認證。

2024.4.26

所有地區

所有DataWorks使用者

PostgreSQL資料來源

資料治理中心支援Hologres資料來源

資料治理中心新增支援Hologres資料來源。

如需在資料治理中心中使用Hologres資料來源,請先在資料地圖中採集Hologres中繼資料。具體操作,請參見中繼資料採集

2024.4.24

當前僅華北2(北京)、華東2(上海)、華東1(杭州)和華南1(深圳)地區的資料治理中心支援Hologres資料來源。

所有DataWorks使用者

資料治理中心概述

資料治理中心新增物化視圖功能

當您在面對巨量資料計算任務頻繁且存在大量相似子查詢情境時,DataWorks支援自動化治理,智能推薦物化視圖,為您提供了一種智能化、自動化的解決方案。當您啟用此功能時,DataWorks能夠自動識別和分類MaxCompute中的相似子查詢,並產生物化視圖推薦,您可以按需一鍵產生物化視圖,從而顯著提升計算效率和節省計算資源。

2024.4.12

所有地區

所有DataWorks使用者

自動化治理-物化視圖

DataWorks on CDH/CDP支援OPEN LDAP認證

在DataWorks註冊CDH/CDP叢集時,支援自訂阿里雲帳號與CDH/CDP叢集OPEN LDAP帳號的映射關係。映射後,使用阿里雲帳號在DataWorks提交啟動並執行CDH/CDP任務,實際由映射的OPEN LDAP帳號執行。該方式用於對不同雲帳號在CDH叢集內可訪問的資料進行許可權隔離。

2024.4.8

華北2(北京)、華東2(上海)、華東1(杭州)、華南1(深圳)、華北3(張家口)、西南1(成都)

所有DataWorks使用者

設定叢集身份映射

03月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

新版補資料功能上線

周期任務開發完成並提交發布後會按照調度配置定時運行,若您希望在指定時間段運行周期任務,可使用補資料功能。補資料可通過補歷史或未來一段時間的資料,將資料寫入至對應時間分區。新版補資料支援的補資料方式如下:

2024.3.28

所有地區

所有DataWorks使用者

補資料執行個體營運

開放平台支援通過Function Compute開發部署擴充程式

在DataWorks的擴充程式中,您可自訂事件訊息的卡點邏輯,監管使用者的操作行為(例如,攔截和阻斷不當行為)。通過Function Compute開發部署擴充程式,特定事件訊息後續將直接下發至相應Function Compute服務。該方式:

  • 操作簡單,僅需一個函數即可完成擴充程式的部署。

  • 會產生相應的Function Compute費用,詳情請參見計費概述

  • 部署的擴充程式目前僅支援處理資料下載前置事件。

2024.3.19

  • 華北2(北京)

  • 華東1(杭州)

  • 華東2(上海)

  • 華北3(張家口)

  • 華南1(深圳)

  • 西南1(成都)

  • 美國(矽谷)

  • 美國(維吉尼亞)

  • 德國(法蘭克福)

  • 日本(東京)

  • 中國香港

  • 新加坡

DataWorks企業版使用者

開發部署擴充程式:Function Compute方式

資料建模支援自訂模型的發布策略

資料建模支援自訂模型的發布策略。策略啟用後,發布模型時可根據策略配置選擇相應的發布模式。

2024.3.12

所有地區

購買智能資料建模產品的DataWorks使用者

發布策略管理

02月

功能名稱

描述

發布時間

發布地區

使用客戶

相關文檔

新增在DataWorks使用 CDP/CDH的相關介紹

為您介紹在DataWorks上使用CDP/CDH的基本開發流程,以及相關費用說明、環境準備、許可權控制等內容。

2024.2.21

所有地區

所有DataWorks使用者

DataWorks On CDP/CDH使用說明

資料服務支援執行個體模式的StarRocks資料來源

開通E-MapReduce Serverless StarRocks叢集後,您可在DataWorks中通過執行個體模式新增StarRocks資料來源,DataWorks資料服務支援面向StarRocks資料來源快速封裝資料API,實現資料共用與開放。

2024.2.20

所有地區

所有DataWorks使用者

資料服務配置資料來源

資料地圖新增資料開發程式碼搜尋

DataWorks資料地圖新增資料開發程式碼搜尋功能,支援跨工作空間全域代碼檢索,通過關鍵字精確定位目標代碼,協助您提升開發效率、減少工程冗餘。

2024.2.20

所有地區

DataWorks標準版及以上版本使用者

中繼資料檢索

新增資料上傳與下載功能

DataWorks的資料上傳與下載功能支援將本地CSV檔案、OSS檔案資料上傳至MaxCompute進行處理及分析。同時,也可管理上傳的檔案清單和DataWorks資料分析等模組下載的檔案清單,方便您管理和操作資料。

2024.2.20

所有地區

所有DataWorks使用者

資料開發新增CDH叢集節點

您可在DataWorks上進行CDH相關的Hive、Spark、MR、Presto、Impala等任務的開發和周期性調度。

2024.2.19

所有地區

所有DataWorks使用者

資料保護傘新版系統配置頁面發布上線

您可通過系統配置:

  • 設定資料保護傘的識別內容、識別範圍。

  • 設定浮水印檔案儲存時間。

  • 設定是否展示風險識別的資料安全等級。

  • 設定警示資訊的內送郵件及WebHook地址。

以便及時發現並處理潛在安全風險。

2024.2.6

所有地區

所有DataWorks使用者

系統配置

01月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

資料開發與資料分析的查詢結果支援脫敏展示

資料保護傘支援對E-MapReduce表資料進行分類分級、敏感性資料識別、資料脫敏展示。

您在資料開發和資料分析中執行SQL語句查詢資料時,若該資料被識別為敏感性資料,平台將會按照脫敏規則進行遮蓋、加密等模式的脫敏展示,加強企業資料安全管控。

2024.1.25

所有地區

所有DataWorks使用者

資料地圖支援展示即時同步鏈路資料血緣

資料地圖新增解析及展示如下即時同步鏈路的資料血緣:

  • MySQL即時寫入MaxCompute/Hologres

  • Kafka即時寫入MaxCompute/Hologres

  • Loghub即時寫入MaxCompute/Hologres

  • PolarDB即時寫入MaxCompute

通過即時同步血緣和離線同步血緣的組合分析,協助您更全面地瞭解資料流轉情況。

2024.1.15

所有地區

所有DataWorks使用者

資料血緣分析

2023年

12月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

資料開發(DataStudio)綁定資料來源

若您要在DataWorks中進行資料建模、資料開發或使用營運中心周期性調度任務,需先將已建立的資料來源或叢集綁定至資料開發(DataStudio)模組。綁定後,才可讀取資料來源或叢集中的資料,並進行相關開發操作。

2023.12.29

所有地區

所有DataWorks使用者

開發前準備:綁定計算資源或叢集

計算資源發布

為給您帶來更統一的產品使用體驗,DataWorks將MaxCompute、Hologres、AnalyticDB for PostgreSQL、AnalyticDB for MySQL、ClickHouse計算引擎合并至計算資源;將E-MapReduce(簡稱EMR)、CDH/CDP引擎合并至開源叢集管理。合并後,原計算引擎的相關操作(例如,建立、編輯)將通過計算資源/開源叢集介面執行。

2023.12.29

所有地區

所有DataWorks使用者

新增擴充點事件

  • DeleteProject:刪除專案空間前置事件。

  • ProjectDeleted:刪除專案空間後置事件。

  • DownloadResources:資料下載事件。

2023.12.27

所有地區

所有DataWorks使用者

新增擴充點應用範圍

擴充點事件新增應用範圍:

  • 租戶級:租戶級事件對整個租戶均生效。

  • 空間級:空間級事件僅對目標工作空間生效。

註冊擴充程式時,僅支援選擇某一類型的擴充點事件。

2023.12.22

  • 華北2(北京)

  • 華東1(杭州)

  • 華東2(上海)

  • 華北3(張家口)

  • 華南1(深圳)

  • 西南1(成都)

  • 美國(矽谷)

  • 美國(維吉尼亞)

  • 德國(法蘭克福)

  • 日本(東京)

  • 中國香港

  • 新加坡地區

所有DataWorks使用者

資料治理中心新增SQL效率最佳化檢查項

資料治理中心新增對ODPS、Hive、Spark SQL的笛卡爾積檢查、無效全表JOIN檢查、暴力掃描等5項檢查項,協助您在研發環節進行事前主動檢查和及時最佳化,提升計算效率,避免出現大量計算資源浪費,保障資料產出時效性。

2023.12.22

所有地區

所有DataWorks使用者

配置檢查項

新增適配StarRocks資料來源

DataWorks全面適配StarRocks資料來源:

  • Data Integration:支援同步StarRocks資料。

  • 資料開發:支援建立StarRocks任務並周期性調度。

  • 資料分析:支援查詢並分析StarRocks資料。

  • 資料服務:支援將StarRocks資料表封裝為API。

  • 資料地圖:支援納管StarRocks中繼資料並進行搜尋展示。

2023.12.15

所有地區

所有DataWorks使用者

新增適配多個E-MapReduce Hadoop叢集版本

DataWorks新增適配十餘種E-MapReduce Hadoop叢集版本,包括:

  • EMR-3.26.3

  • EMR-3.27.2

  • EMR-3.29.0

  • EMR-3.32.0

  • EMR-3.35.0

  • EMR-3.38.2

  • EMR-3.38.3

  • EMR-4.3.0

  • EMR-4.4.1

  • EMR-4.5.0

  • EMR-4.5.1

  • EMR-4.6.0

  • EMR-4.8.0

  • EMR-4.9.0

  • EMR-5.2.1

  • EMR-5.4.3

  • EMR-5.6.0

2023.12.15

所有地區

所有DataWorks使用者

DataWorks On EMR使用說明

資料開發Check節點新增檢查對象

Check節點可用於檢查目標對象(MaxCompute分區表、FTP檔案或OSS檔案)是否可用,當滿足檢查策略後Check節點會返回運行成功狀態。

若某任務的運行依賴目標對象,可使用Check節點檢查目標對象,並設定該任務為Check節點的下遊任務,滿足檢查策略後,Check節點便會運行成功並觸發下遊任務執行。

2023.12.08

所有地區

所有DataWorks使用者

Check節點

資料開發新增PAI DLC節點

您可通過PAI DLC節點周期性調度運行PAI DLC任務。

2023.12.08

所有地區

所有DataWorks使用者

建立並使用PAI DLC節點

資訊安全中心增加即時風險識別規則

資訊安全中心支援管理員將風險識別能力以擴充程式的方式註冊至DataWorks,作為風險識別規則,用於識別操作行為中的風險。

當前已支援對資料下載操作行為通過預設/自訂擴充程式識別風險,並按需申請下載或阻斷下載行為。

2023.12.08

所有地區

所有DataWorks使用者

風險識別規則

11月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

資料開發(DataStudio)新增Check節點

DataWorks的Check節點可檢查MaxCompute分區表是否已可用(即目標資料分割存在或已判斷分區資料寫入完成)。當下遊任務需依賴該MaxCompute分區表時,您可使用此功能先檢查分區資料是否可用,避免操作的資料有誤。

2023.11.20

  • 西南1(成都)

  • 華北3(張家口)

  • 華北2(北京)

  • 華東2(上海)

  • 馬來西亞(吉隆坡)

所有DataWorks使用者

Check節點

08月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

DataWorks支援自訂調度周期

基於DataWorks原有調度周期,新增調度日曆,支援使用者在日曆上標記調度策略為調度日或非調度日,達到自訂調度周期的效果。

2023.08.24

所有地區

DataWorks企業版本使用者

配置調度日曆

資料治理中心支援E-MapReduce資料湖研發治理

DataWorks資料治理中心新增基於E-MapReduce叢集+DLF+DataWorks資料湖開發鏈路的主動治理分析,包括:

  • 支援治理健康分評估。

  • 支援研發及儲存維度治理項問題自動探索。

  • 支援基於Hive SQL與Spark SQL的事前問題檢查預防。

2023.08.24

  • 華北2(北京政務雲)

  • 華東2(上海金融雲)

  • 華東2(上海)

  • 華東1(杭州)

  • 華北2(北京)

  • 華南1(深圳)

  • 西南1(成都)

  • 中國香港

  • 新加坡

  • 美國(矽谷)

  • 德國(法蘭克福)

  • 印尼(雅加達)

DataWorks企業版及以上版本使用者

資料治理中心概述

06月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

Kafka資料來源即時同步Hologres並進行ETL

  • Kafka資料來源至Hologres的即時同步可以實現同步過程中對於Kafka的JSON含義解析,以及其他基本的資料處理,實現即時同步的ETL流程。

  • 支援指定JSON路徑的Key及Value擷取,也支援動態Key及Value擴充,適合Kafka源端訊息格式存在變化的情境。

  • 支援任務配置過程中的類比運行,提前獲知寫入結果的資料處理正確與否。

2023.06.01

所有地區

DataWorks所有使用者

Kafka資料來源

MySQL整庫即時同步至OSS資料湖,寫為Hudi格式

MySQL整庫即時同步至OSS資料湖,寫為Hudi格式。

  • 支援自動對接阿里雲DLF,產生中繼資料用於管理。

  • 支援執行個體層級的同步,即源端MySQL可以同時選擇多個庫。

  • 支援按照Regex選定來源MySQL庫和表。

  • 支援自動加庫加表,即MySQL資料來源增加庫、表後,可以自動同步至OSS,無需手工幹預和操作。

2023.06.01

所有地區

所有DataWorks使用者

OSS資料來源

Data Integration支援AWS RDS資料來源

將AWS RDS按照MySQL資料來源方式進行配置,MySQL資料來源自身具備的所有能力,AWS RDS也同樣適用。

2023.06.01

所有地區

所有DataWorks使用者

MySQL資料來源

04月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

資料分析結果直接儲存為MaxCompute表

資料分析結果無需通過代碼建立表,可以直接儲存為MaxCompute表,進行後續查詢或聯合分析。

2023.4.20

所有地區

所有DataWorks使用者

SQL查詢(舊版)

資料分析支援查詢結果百萬級資料下載

資料分析SQL查詢下載條數預設1萬條,對於DataWorks標準版、專業版、企業版、旗艦版,管理員可在資訊安全中心設定的最大下載條數分別為標準版(20萬)、專業版(200萬)、企業版(500萬)、旗艦版(500萬)。同時,也可以關閉下載功能。

2023.4.18

所有地區

所有DataWorks使用者

SQL查詢(舊版)

巨量資料公用資料集上線

基於巨量資料AI公用資料集(淘寶、飛豬、阿里音樂、GitHub、TPC等),通過DataWorks與MaxCompute快速完成TB層級巨量資料分析。

2023.4.11

所有地區

所有DataWorks使用者

SQL查詢(舊版)

03月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

資料治理中心支援使用訊息通知治理問題

管理員及個人使用者,可將治理工作台中每日治理的待解決問題,以訊息通知的形式,通過系統提示、郵件、DingTalk群、Webhook等方式發送給指定對象。方便治理責任人及時瞭解最新待治理問題進展並快速進入系統處理。

2023.3.15

所有地區

所有DataWorks使用者

配置訊息通知

資料治理中心新增儲存長生命週期治理項

儲存長生命週期治理項可協助使用者對MaxCompute分區表合理設定生命週期,減少儲存資源的浪費。

2023.3.15

所有地區

所有DataWorks使用者

處理治理項問題

資料服務的加速服務啟動商業化

加速服務面向MaxCompute資料來源產生線上API服務,無需匯出MaxCompute資料,即可提供良好的查詢效能與效率,滿足線上查詢需求。

2023.3.1

華東2(上海)、華北2(北京)、華東1(杭州)、華南1(深圳)地區。

所有DataWorks使用者

加速服務

01月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

DataWorks新增已購資源進行商品管理

新增功能如下:

DataWorks支援展示您當前所有已購買且未釋放的下屬商品,方便您快速進行升降規格、退費、續約等操作。

2023.1.11

所有地區

所有DataWorks使用者

計費簡介

DataWorks資料治理中心新增任務批量優雅下線

新增功能如下:

  • 提供面向情境的專項治理計劃,主要針對無效或重複任務需要批量安全下線的情境。

  • 提供優雅下線治理計劃。治理負責人通過圈定治理對象,快速進行影響人員、影響資產的確認。

  • 提供分步驟執行,協同式完成各節點的暫停、延遲、下線及階段狀態通知,有序平穩地完成任務下線。

2023.1.9

所有地區

所有DataWorks使用者

優雅下線

DataStudio簡單模式支援程式碼檢閱

新增功能如下:

簡單模式支援程式碼檢閱。開啟強制程式碼檢閱,評審通過後節點任務才會在生產環境生效。

2023.1.5

所有地區

所有DataWorks使用者

程式碼檢閱

2022年

11月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

DataWorks資料服務支援面向開發和生產環境資料來源封裝API

DataWorks在標準模式的工作空間下,新增如下功能:

  • 支援根據自行選擇資料來源的環境類型(開發環境或生產環境),設定API的進階參數。

  • 實現使用開發環境資料庫進行測試、使用生產環境資料庫進行介面發布的需求。

2022.11.29

所有地區

所有DataWorks使用者

通過資料來源產生API(API Gateway)

DataWorks資料地圖支援申請Hive表許可權

DataWorks數據地圖 > EMR Hive表詳情頁面,新增申請權限按鈕,支援跳轉至資訊安全中心進行表許可權的申請。

2022.11.29

所有地區

所有DataWorks使用者

哪些類型的Hive表支援在資料地圖中預覽?

DataWorks資料地圖新增資料專輯功能

DataWorks數據地圖新增資料專輯頁面,功能如下:

  • 支援按照業務視角來進行資料表的分類、分級組織和管理。

  • 支援將常用表、團隊表、熱門表等加入目標專輯中進行收納,實現快速、便捷地檢索和定位。

2022.11.16

所有地區

所有DataWorks使用者

資料專輯

DataWorks資料分析新版升級,全新的SQL查詢體驗

DataWorks資料分析,新增功能如下:

  • 支援使用者統一管理個人名下的所有SQL檔案及輔助取數工作常用的資料表集合。

  • 支援有許可權的使用者通過SQL語句進行業務資料提取。

  • 支援對SQL查詢結果進行二次加工及可視化圖表展示。

2022.11.15

全部地區

所有DataWorks使用者

SQL查詢(舊版)

DataWorks資料服務支援解析進階SQL中的請求參數和返回參數

在資料服務中,新增如下功能:

  • 支援通過進階指令碼模式建立API時,在右側導覽列的請求參數返回參數的面板中進行一鍵參數解析。

  • 減少手動錄入參數的負擔。

2022.11.10

全部地區

所有DataWorks使用者

10月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

DataWorks智能資料建模支援E-MapReduce Hive,建模能力對齊MaxCompute

DataWorks智能數據建模 > 維度建模新增如下兩種功能:

  • 支援將模型發布至E-MapReduce Hive,並能產生相應的ETL架構代碼。

  • 支援將已存在的E-MapReduce Hive物理表逆向產生模型。

2022.11.25

全部地區

所有DataWorks使用者

DataWorks智能資料建模支援對模型進行版本管理

DataWorks智能數據建模 > 維度建模新增如下兩種功能:

  • 支援對模型進行版本管理,只有正式提交的模型才能進行發布等操作。

  • 支援對同一個模型的不同版本進行版本對比及復原操作。

2022.11.25

全部地區

所有DataWorks使用者

物化邏輯模型

DataWorks資料服務API詳情頁面新增展示各網域名稱的調用地址

在API詳情頁面會展示當前API基於公網網域名稱、VPC網域名稱、獨立網域名稱分別產生的調用地址,您可靈活選用不同的網域名稱進行API調用。

2022.10.21

全部地區

所有DataWorks使用者

查看API詳情

DataWorks資料地圖血緣大圖全新升級

新版資料血緣資訊為您提供更好的血緣分析體驗。在血緣資訊詳情頁面,您可以執行如下操作:

  • 可查看錶或表欄位的上下遊節點。

  • 查看錶未經處理資料來源及表資料最終流向。

  • 進行不同層級血緣的影響分析。

2022.10.21

全部地區

所有DataWorks使用者

查看錶詳情

DataWorks資料治理中心新增支援4種研發維檢查項

DataWorks資料治理中心新增4種檢查項:

  • JOIN關聯條件類型一致性。

  • 部分資產禁止使用。

  • 同名UDF使用。

  • 開發環境寫入限制。

主要功能如下:

  • 管控檢查能力。

    您可在組態管理中開啟並配置新增檢查項,查看治理知識庫使用詳情。

  • 在資料開發工作單位提交及發布時,進行主動式研發資料治理。

2022.10.20

全部地區

所有DataWorks使用者

配置檢查項

DataStudio簡單模式支援程式碼檢閱

簡單模式開啟強制程式碼檢閱,完成評審後,該代碼才會在生產環境生效。

2022.9.22

全部地區

所有DataWorks使用者

程式碼檢閱

08月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

營運中心新增商務程序視角的任務管理

DataWorks營運中心支援使用商務程序視角查看任務的運行情況,並執行重跑、凍結、終止運行等商務程序營運操作。

2022.8.22

全部地區

所有DataWorks使用者

查看周期執行個體

資料服務新增面向MaxCompute資料來源的加速查詢

DataWorks資料服務支援面向MaxCompute資料來源產生線上API,無需匯出MaxCompute資料,即可提供良好的查詢效能與效率,滿足線上查詢需求。其加速方案包括:

  • 基於Hologres外部表格的加速服務。

  • 基於MCQA的加速服務。

2022.8.17

華東2(上海),華南1(深圳)

所有DataWorks使用者

加速服務

資料服務新增智能診斷及分析調用鏈路

DataWorks資料服務支援對API調用日誌進行分析。您可使用該功能分析單條調用請求的鏈路,及時發現異常請求,快速定位問題並給出診斷結果及建議。

2022.8.7

全部地區

DataWorks使用者

查看與分析API調用日誌(公測)

資料地圖新增專案、表層級的細粒度許可權管控

DataWorks資料地圖可通過多樣化配置實現不同粒度的中繼資料許可權管控,包括:

  • 是否允許其他專案成員在資料地圖查看當前專案的中繼資料。

  • 是否允許非專案成員、非表負責人和空間管理員在資料地圖查看錶中繼資料。

2022.8.5

全部地區

DataWorks使用者

附錄:資料地圖許可權管控能力總覽

Data Integration支援使用嚮導模式離線同步達夢資料庫

DataWorksData Integration支援使用可視化嚮導模式離線同步達夢資料庫的資料,該方式相較指令碼模式更易操作。

2022.8.2

全部地區

DataWorks使用者

嚮導模式配置

07月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

DataWorks智能資料建模支援維度建模

DataWorks智能資料建模支援以下功能:

  • 您可以在模板設計中直接引用Hologres中已存在的表或視圖的欄位及分區資訊,作為當前模型的欄位。

  • 您可以在模板設計中對欄位顯示名稱為空白或描述為空白的欄位進行一鍵填充。

    大多數情況下,物理表有欄位描述。如果無欄位顯示名稱,通過該功能可快速補充欄位顯示名稱資訊,提升建模效率。

  • 您可以在模板開發中建立DataStudio節點或綁定DataStudio已有節點,提升模型的ETL研發效率。

2022.7.29

華東1(杭州),華東2(上海),華北2(北京),華北3(張家口),華南1(深圳),西南1(成都),中國香港, 新加坡,上海金融雲,深圳金融雲,北京政務雲,德國(法蘭克福),美國(矽谷)

所有DataWorks使用者

DataWorks智能資料建模支援查看關聯表資訊

您可以開啟派生指標或原子指標的編輯頁面,在右側導覽列中查看當前指標所關聯的模型表名稱及欄位名稱,且支援跳轉至目標表編輯頁面管理關聯關係。

2022.7.29

所有DataWorks使用者

派生指標

智能資料建模支援設定模型及指標的命名規則檢查

在數倉規劃的數倉分層下,您可以設定模型或指標類型的命名檢查器。當您在設計模型和指標時,命名檢查器能夠對實體名稱進行約束和校正,從而提升整個開發流程中的命名規範性。

命名規則:

  • 規則強弱:強規則代表對名稱的推薦填寫及強制檢查,弱規則代表對名稱的推薦填寫。

  • 規則定義:基於多元素對名稱的組織順序和構成進行設定。

2022.7.29

所有DataWorks使用者

數倉分層

DataWorks資料分析支援針對設定獨享資源群組

支援主帳號在“系統設定”中設定資料分析。您可以在指定獨享資源群組下進行SQL查詢。

2022.7.29

華東1(杭州),華東2(上海),華北2(北京),華北3(張家口),華南1(深圳),西南1(成都),德國(法蘭克福)

所有DataWorks使用者

系統管理

Data IntegrationDataStudio智能

支援Postgres資料庫,SSL認證時支援.crt.key雙檔案方式。

2022.7.26

華東1(杭州),華東2(上海),華北2(北京),華北3(張家口),華南1(深圳),西南1(成都),中國香港,日本(東京),新加坡,馬來西亞(吉隆坡),印尼(雅加達),德國(法蘭克福),英國(倫敦),美國(矽谷),美國(維吉尼亞),阿聯酋(杜拜)

所有DataWorks使用者

Data Integration

DataWorks支援EMR新版資料湖DataLake

DataWorks支援基於EMR計算引擎新版資料湖DataLake,實現基於EMR引擎的Data Integration、資料建模、資料開發調度、資料品質、資料地圖、資料安全、資料分析(獨享資源群組)、資料服務等資料全周期能力。

2022.7.8

西南1(成都), 華北3(張家口),華南1(深圳),美國(矽谷),華北2(北京),華東2(上海),日本(東京),德國(法蘭克福),美國(維吉尼亞),印尼(雅加達),英國(倫敦),華東1(杭州),新加坡,中國香港,馬來西亞(吉隆坡)、阿聯酋(杜拜)

所有DataWorks使用者

DataWorks On EMR使用說明

DataStudio智能編輯器支援可視化插入欄位和表許可權校正

  • 智能編輯器自動識別代碼中查詢表欄位的部分,您可以把滑鼠懸浮在表名上,選擇需要查詢的欄位後,單擊確認。即可將欄位名自動插入到代碼中。

  • 智能編輯器提供對錶許可權的校正,您可以根據提示直接申請許可權。

2022.7.2

華東1(杭州),華東2(上海),華北2(北京),華北3(張家口),華南1(深圳),西南1(成都),中國香港

所有DataWorks使用者

資料開發(DataStudio)(舊版)

06月

功能名稱

功能描述

發布時間

發布地區

使用客戶

相關文檔

資料治理中心全面開放使用

資料治理中心功能如下:

  • 通過從儲存、計算、開發、品質和安全五個維度量化評估治理健康分,可自動探索和預防各類資料治理問題。

  • 提供任務資源消耗明細、資源消耗整體趨勢、單任務費用預估等豐富功能,可協助您對各類資源使用費用進行有效最佳化控制。

說明
  • 資料治理中心在2022年7月5日全面開放使用,提供為期1個月的限時體驗。

  • 2022年8月5日後,所有能力將在DataWorks企業版中提供。

2022.6.27

華東1(杭州),華東2(上海),華北2(北京),華南1(深圳),西南1(成都),新加坡,美國(矽谷)

所有DataWorks使用者

資料治理中心概述

資料治理中心支援任務360功能

提供任務的360全景功能,將任務關聯的治理項問題、變更事件記錄、影響基準、任務執行資訊等關鍵資訊進行集中展示,方便您根據資訊進行調度任務治理。

2022.6.24

華東1(杭州),華東2(上海),華北2(北京),華南1(深圳),西南1(成都),新加坡,美國(矽谷)

所有DataWorks使用者

全景查看任務

智能資料建模支援查詢檢視表及建立視圖

  • 您可以在模型設計過程中直接引用已存在的視圖欄位及分區資訊作為當前模型的欄位。

  • 您可以在模型設計完成後將模型物化為視圖。

2022.6.22

華東1(杭州),華東2(上海),華北2(北京),華北3(張家口),華南1(深圳),西南1(成都),中國香港,新加坡,美國(矽谷),德國(法蘭克福),華東2(上海)金融雲,華南1(深圳)金融雲,華北2(政務雲)

所有DataWorks使用者

物化邏輯模型

智能資料建模支援表名關鍵詞逆向產生模型

您可以在逆向建模過程中,根據表名關鍵詞模糊比對,逆向產生邏輯模型。

2022.6.19

華東1(杭州),華東2(上海),華北2(北京),華北3(張家口),華南1(深圳),西南1(成都),中國香港,新加坡,美國(矽谷),德國(法蘭克福),華東2(上海)金融雲,華南1(深圳)金融雲,華北2(政務雲)

所有DataWorks使用者

逆向建模:物理表反向建模

核准中心支援管控Data Integration

為保障您的資料轉送安全,核准中心為您提供基於源端、目的端的組合定義在儲存或Data Integration任務時必須觸發審批,針對資料同步過程進行更加靈活的管控。

2022.6.15

華東1(杭州),華東2(上海),華北2(北京),華北3(張家口),華南1(深圳),西南1(成都),中國香港,新加坡,印尼(雅加達),馬來西亞(吉隆坡),美國(矽谷),美國(維吉尼亞),德國(法蘭克福) 。

所有DataWorks使用者

Data Integration審批策略

資料保護傘新增敏感性資料血緣可視化圖譜

新增敏感性資料血緣可視化圖譜,功能如下:

  • 基於資料的生產資訊解析出敏感欄位之間的血緣關係,將其中敏感欄位類型相同的血緣關係進行識別結果擴散,極大提高識別效率。

  • 可根據識別出的血緣關係自動繪製成敏感性資料血緣可視化圖譜,清晰瞭解資料的來龍去脈。

說明

本功能僅限DataWorks企業版使用。

2022.6.14

華東1(杭州),華東2(上海)

所有DataWorks使用者

資料血緣(公測)

資料保護傘新增異常血緣關係分析功能

新增異常血緣關係分析,功能如下:

  • 系統根據敏感欄位的血緣關係,自動分析欄位之間的異常關聯關係,避免通過字元拼接、拆解的方式繞過敏感性資料的識別和使用審計。

  • 協助您識別出與查詢欄位有血緣關係,但敏感欄位類型識別結果不一致的欄位。

2022.6.14

華東1(杭州),華東2(上海)

所有DataWorks使用者

資料血緣(公測)

05月

功能名稱

功能描述

發布時間

發布地區

適用客戶

相關文檔

資料保護傘風險識別最佳化功能全新改版(老使用者需遷移)。

新版風險識別功能內建風險識別情境,支援資料分類分級、操作方式、人員許可權等多維度組合風險識別,增加警示事件彙總度判斷減少誤判情況,支援高、中、低的精細化風險管理,全方位洞察企業內部各類資料風險。

說明
  • 風險識別管理需要購買DataWorks專業版以上才可以進行使用。

  • 舊版風險識別管理將保留至2022年06月30日,到期後,已建立的風險識別規則及相關風險資料將自動清除,後續則只能使用新版風險識別管理功能,請您及時將需要使用的規則及風險資料匯出備份。

  • 老使用者需遷移至新版,才可使用新版功能。

2022.5.16

華東1(杭州),華東2(上海),華北2(北京),華北3(張家口),華南1(深圳),西南1(成都),中國香港

所有DataWorks使用者。

風險識別管理

04月

功能名稱

功能描述

發布時間

發布地區

適用客戶

相關文檔

DataStudio最佳化資料開發各類檔案的管理能力。

  • 您可以直接點擊新建節點,系統會推薦最近常用的節點類型,無需再手動逐個尋找所需要的節點。

  • 增加我的收藏,常用節點可以直接收藏,方便快速修改或與他人進行協同編輯。

  • 最佳化左側分類樹,未提交作業任務會直接顯示提交發布圖形按鈕,方便進行任務的快速發布。

2022.4.7

華東1(杭州),華東2(上海),華北2(北京),華北3(張家口),華南1(深圳),西南1(成都),中國香港

所有DataWorks使用者。

DataStudio功能引導

資料品質新增全域品質規則批量管理。

新增品質規則列表,功能如下:

  • 可以展示您在現有工作空間下配置的全域資料品質規則,並對規則進行批量的啟停、訂閱、關聯調度、強弱規則設定等操作。

  • 可搭配現有的按模版配置規則的能力,能夠批量、快速地建立、管理品質規則,治理企業各類資料品質問題。

2022.4.11

華東1(杭州),華東2(上海),華北2(北京),華北3(張家口),華南1(深圳),西南1(成都),中國香港

所有DataWorks使用者。

資料品質規則配置流程

營運中心智能基準支援更靈活的警示管理設定。

智能基準升級以後,功能具體如下:

  • 支援統一針對基準執行個體、事件及基準進行管理。

  • 支援為每條基準單獨設定簡訊/郵件/電話等不同的警示規則,並且可以直接關聯值班表,避免頻繁變更責任人帶來的複雜操作。

2022.4.26

華東1(杭州),華東2(上海),華北2(北京),華北3(張家口),華南1(深圳),西南1(成都),中國香港

所有DataWorks使用者。

智能基準概述

03月

功能名稱

功能描述

發布時間

發布地區

適用客戶

相關文檔

發布中心支援跨工作空間發布,發布管控能力增強。

發布中心支援將工作空間內的任務、資源、函數等對象發布至另一個工作空間,解決多工作空間之間的任務發布問題。

2022.3.2

全部地區

金融領域、政府等對於發布強管控使用者。

跨工作空間發布

資料分析操作記錄接入安全審計。

DataWorks資料分析中,如下操作的操作記錄已接入安全審計:

  • 運行MaxCompute SQL語句。

  • 下載SQL運行結果。

  • 下載試算表。

2022.3.20

全部地區

所有DataWorks使用者。

資料治理中心治理熱門排行榜功能最佳化。

資料治理中心治理熱門排行榜功能最佳化,新增以下功能:

  • 支援按照角色過濾治理項。

  • 支援對治理項檢查器事件按照不同維度進行排序。

  • 支援展示工作空間下全部人員的治理排行。

  • 查看待治理項問題列表詳情。

  • 查看資源消費歷史趨勢圖與MaxCompute消耗明細。

2022.3.21

全部地區

參與邀測的資料治理中心使用者。

查看治理結果

Data Integration配置任務效能最佳化。

使用Data Integration獨享資源群組運行一鍵即時同步至MaxCompute一鍵即時同步至Hologres任務時,每個任務可選擇超過1000張表,使同步效率更加高效。

2022.3.25

全部地區

SAAS平台、金融領域等需要同步大批量表資料的使用者。

PostgreSQL環境準備

2021年

12月

功能名稱

功能描述

發布時間

發布地區

相關文檔

資料品質支援選擇規則模板來大量設定資料品質規則。

DataWorks資料品質支援選擇規則模板來大量設定資料品質規則,簡化配置難度:

  • 支援選擇表級規則模板,批量給多張表配置規則。

  • 支援選擇欄位級規則模板,批量給多個欄位配置規則。

2021.12.14

全部地區。

配置規則:按模板(批量)

資料治理中心新增資源流量分析功能。

DataWorks資料治理中心新增資源流量分析功能,從MaxCompute存儲消耗MaxCompute計算消耗DataWorks調度消耗DataWorks離線同步消耗四個維度展示資源消耗總覽、資源消耗異動,以及資源消耗明細。

2021.12.9

全部地區。

透視分析:按資源類型

11月

功能名稱

功能描述

發布時間

發布地區

相關文檔

資料開發新增資源群組編排功能。

DataWorks的資源群組編排功能,協助您在資料開發階段,批量修改指定商務程序下目標節點使用的調度資源群組。當您的工作空間中有多個調度資源群組時,可以根據實際業務需求,使用該功能快速為目標節點重新分配資源群組,促進資源的合理使用。

2021.11.30

全部地區。

資源群組編排

資料開發新增大量操作功能。

DataWorks支援對節點、資源、函數進行批量修改責任人等大量編輯操作,並支援批量提交並發布,將變更操作發布至生產環境生效。

2021.11.11

全部地區。

大量操作

10月

功能名稱

功能描述

發布時間

發布地區

相關文檔

DataWorks智能資料建模新增逆向建模、命名詞典功能。

  • 命名詞典為您提供管理業務名詞、物理表、欄位的詞根和詞素及其標準化翻譯功能。

  • 逆向建模功能協助您將其他工具建好的模型反向建模至DataWorks的維度建模中。

2021.10.30

該功能目前正在公測中,已開通公測的地區有:華北2(北京)、華東2(上海)、華東1(杭州)、華南1(深圳)、華北3(張家口)、西南1(成都)、新加坡、美國(矽谷)、德國(法蘭克福)、中國香港、華東2(上海)金融雲、華南1(深圳)金融雲。

資料開發新增程式碼搜尋功能。

DataWorks的程式碼搜尋功能,用於通過關鍵字搜尋節點中的程式碼片段,並展示包含該程式碼片段的所有節點及片段的詳細內容。當目標表資料產生變更,您需要尋找操作源(即導致目標表資料變更的任務)時,可以使用該功能。

2021.10.27

全部地區。

程式碼搜尋

09月

功能名稱

功能描述

發布時間

發布地區

相關文檔

資料服務API資產全面納入資料地圖。

資料服務API資產(嚮導、指令碼、註冊等類型API)已接入資料地圖,支援企業情境和全域範圍的資料介面尋找及管理,包括全域API檢索、熱門API統計、獨立API詳情頁、各資料來源下的API分布等產品功能。

2021.09.30

全部地區。

資料治理中心全新發布。

DataWorks的資料治理中心從全域視角、工作空間視角、個人視角,自動探索並量化平台使用過程中資料存放區、任務計算、代碼開發、資料品質及資料安全等維度存在的待治理問題,並通過健康分模型進行統計,以治理報告及治理熱門排行榜的形式呈現治理結果,協助您有效推動解決治理問題,達成治理目標。

2021.09.12

該功能目前正在公測中,已開通公測的地區有:華東2(上海)、華東1(杭州)、華北2(北京)、華南1(深圳)。

資料治理中心概述

08月

功能名稱

功能描述

發布時間

發布地區

相關文檔

獨享資料服務資源群組上線杭州、上海地區。

在調用資料服務API需要高QPS和SLA保障的情況下,企業需要使用獨享的資料服務資源來保障調用成功。同時,獨享資料服務資源群組能夠滿足高並發、高頻率的介面調用並及時返回結果資料。

2021.08.06

華東1(杭州)、華東2(上海)地區。

獨享資料服務資源群組計費

DataWorks遷移助手8.1日正式商業化。

遷移助手可以幫您快速複製DataWorks上不同的版本、主帳號、地區和工作空間中的開發成果。遷移助手支援遷移周期任務、手動任務、資源、函數、資料來源、表中繼資料、臨時查詢和組件等對象。您可以根據業務需求,選擇全量匯出、增量匯出或自選匯出等方式匯出DataWorks中的開發成果。

2021.08.01

全部地區。

遷移助手

07月

功能名稱

功能描述

發布時間

發布地區

相關文檔

DataWorks資料治理模組新增核准中心,可自訂審批次程序。

DataWorks核准中心是一個用於管理資料授權、敏感行為管控流程的功能模組,包含審批範圍定義、審批次程序定義等核心功能,滿足不同企業在不同內部合規情境下的審批要求。

2021.07.16

全部地區。

核准中心概述

DataWorks支援任務下發EMR gateway節點。

通過任務進階參數,支援任務下發EMR gateway節點,支援EMR負載平衡。後續會上線工作空間層級任務下發節點設定。

2021.07

全部地區。

建立EMR Hive節點

06月

功能名稱

功能描述

發布時間

發布地區

相關文檔

DataWorks支援EMR即時任務開發營運。

DataWorks支援開發EMR Spark Streaming、EMR Streaming SQL任務,並進行營運操作。

主要包括:即時任務開發,任務試運行,任務提交至生產環境,任務出錯重試,查看任務狀態及詳情,任務啟動、終止或下線,監控出錯任務並警示等。

2021.06

全部地區。

建立EMR Spark Streaming節點

EMR資料開發工作單位一鍵遷移至DataWorks。

DataWorks為您提供了以下兩種遷移方式,將EMR叢集下的工作流程(節點和調度配置)、手動任務、資源、資料來源通過DataWorks遷移助手遷移至DataWorks工作空間中。您可通過DataWorks控制台遷移助手,查看遷移進度、遷移結果以及遷移報告。

2021.06

全部地區。

遷移EMR專案至DataWorks

營運中心新增資源營運,支援獨享資源群組水位監控。

資源營運功能用於監控DataWorks中任務運行所用資源群組的使用方式。

2021.06.09

全部地區。

資源營運

資料服務支援MaxCompute資料來源封裝API。

DataWorks資料服務現已灰階支援直接存取並使用MaxCompute表封裝API,該類API的調用請求將藉助MaxCompute加速查詢能力(MCQA)在引擎中執行資料查詢,實現快速、高效的調用返回。(附:僅支援在獨享資料服務資源群組中使用MaxCompute資料來源)

2021.06

全部地區。

DataWorks新增警示連絡人中心。

您可以通過警示連絡人頁面,將目標RAM使用者或RAM角色添加為警示連絡人,添加後,DataWorks會將任務運行出錯時產生的警示發送至對應連絡人,方便您及時發現並處理異常任務。

2021.06

全部地區。

查看和設定警示連絡人

05月

功能名稱

功能描述

發布時間

發布地區

相關文檔

DataWorksData Integration新增即時同步資料至AnalyticDB for MySQL 3.0的解決 。

DataWorks支援即時同步MySQL、OceanBase、PolarDB等資料庫資料至AnalyticDB for MySQL 3.0。您可以先全量同步,再啟動即時增量同步處理,實現資料的不間斷同步。同時,即時同步已經自動支援源端增加列時,目標端接收同步資料的表也會增加相應列。

2021.05.25

全部地區。

資源規劃與配置

開放Message Service(Open Message)開啟公測。

DataWorks為您提供了開放訊息能力。您可以在DataWorks開放平台開啟訊息訂閱功能。該功能僅支援DataWorks企業版使用者參與公測活動,企業版使用者可以直接免費參與公測並試用開放訊息功能。您可以通過開放訊息擷取DataWorks中的中繼資料及任務變更事件,實現DataWorks與您的自有系統深度整合。

2021.05.21

華北2(北京)、華東1(杭州)、華南1(深圳)和華東2(上海)地區。

OpenEvent概述

DataWorks任務調度新增年周期和月末最後一天周期。

DataWorks周期任務調度新增了年周期調度和月末最後一天調度,可實現按年、季度、指定月最後一天的周期調度。目前DataWorks調度周期支援包括分鐘小時

2021.05.19

全部地區。

時間屬性配置

DataWorks支援ClickHouse引擎。

DataWorks支援ClickHouse引擎,提供了引擎相關的Data Integration、資料開發、任務調度與任務營運等ETL操作和管理能力。

  • DataWorks支援通過EMR執行個體模式或JDBC串連串模式綁定ClickHouse叢集,以及通過JDBC串連串模式綁定ClickHouse資料來源。

  • DataWorks支援通過Data Integration讀寫ClickHouse資料。

  • DataWorks提供的ClickHouse SQL節點,實現分布式SQL查詢引擎處理結構化資料,提高作業的執行效率。

2021.05.15

全部地區。

04月

功能名稱

功能描述

發布時間

發布地區

相關文檔

DataWorksData Integration支援即時同步到AnalyticDB for MySQL 3.0。

即時同步至AnalyticDB for MySQL 3.0,可以在一個任務中一次同步多個表的即時資訊,即時同步時已經自動支援添加列的DDL同步,即源端增加列時目標端的表也會增加相應列。

2021.4.20

全部地區。

一鍵即時同步至AnalyticDB for MySQL 3.0

DataWorks資料開發模組新增FTP Check功能節點。

FTP Check節點可用於通過FTP協議周期性檢測指定檔案是否存在。如果檔案存在,則啟動調度下遊任務;如果不存在,則按照配置的間隔時間重複資料偵測,直到滿足檢測的停止條件時停止檢測。該節點通常作為DataWorks調度系統與其他調度系統之間傳遞訊號使用。

2021.4.15

華北2(北京)、華東2(上海)、華東1(杭州)、華南1(深圳)、華北3(張家口)、西南1(成都)、新加坡。

FTP Check節點

03月

功能名稱

功能描述

發布時間

發布地區

相關文檔

DataWorks企業版新增自訂角色功能。

自訂角色功能,可以方便您針對實際業務制定許可權功能。

2021.3.22

全部地區。

空間級模組許可權管控

DataWorksData Integration支援Kerberos認證檔案機制。

對於Hive、Kafka等資料來源,有時是需要Kerberos認證檔案來進行訪問的,Data Integration支援Kerberos認證檔案機制,可以自由上傳資料來源相關的認證檔案,並在配置時使用,保證訪問資料來源的安全性。

2021.3.16

全部地區。

附錄:配置Kerberos認證

DataWorks控制台新增新版資訊安全中心功能。

DataWorks的資訊安全中心,協助您快速構建平台的資料內容、個人隱私等相關的安全能力,滿足企業面向高風險情境的各類安全要求(例如,審計),無需您額外配置即可直接使用該功能。

2021.03.13

全部地區。

概述

營運中心新增DAG彙總檢視及上下遊分析功能。

您可以按照工作空間、責任人、優先順序等維度,對DAG圖中的節點進行彙總,查看目標維度節點的總數量。同時,也可以對指定節點進行上下遊分析,快速定位阻塞當前節點啟動並執行上遊節點,並查看當前節點的下遊節點數量,掌握任務的運行情況。

2021.03.10

華南1(深圳)地區。

管理周期任務

02月

功能名稱

功能描述

發布時間

發布地區

相關文檔

資料發現支援大量建立中繼資料採集器。

數據地圖 > 中繼資料採集支援大量建立中繼資料採集器,協助您在資料地圖中快速查看錶的內部結構及與表相關的關聯關係。

2021.02.17

全部地區。

採集E-MapReduce中繼資料

遷移助手支援Airflow。

遷移助手支援將Airflow調度系統中的任務遷移至DataWorks。

2021.02.16

全部地區。

匯出開源引擎任務

資料服務新增計量API。

資料服務的計量API,包括計量大屏及計量詳情。為您提供了各類可視化圖表及統計資料,包括工作空間下的API總數、總調用次數等資訊,協助您從全域角度瞭解API的調用情況。同時,可以針對單個API分別查看監控圖表,擷取API Gateway狀態代碼、資料服務錯誤碼等詳細資料。

2021.02.16

華北2(北京)。

DataWorks控制台新增開放平台功能。

DataWorks控制台的開放平台功能,為您展示OpenAPI的計量報表,方便您查看指定日期OpenAPI的調用詳情。

2021.02.13

全部地區。

DataWorks開放平台OpenAPI報表

01月

功能名稱

功能描述

發布時間

發布地區

相關文檔

DataWorksData Integration新增支援HTTP形式的資料來源。

某些資料來源只能以HTTP REST API形式對外提供資料,或者接收資料。針對這類資料來源,Data Integration支援離線形式讀取和寫入資料。

2021.1.4

全部地區。

RestAPI Reader

2020年

12月

功能名稱

功能描述

發布時間

發布地區

相關文檔

DataWorksData Integration新增全增量同步處理到Elasticsearch。

將指定的整個資料庫全部或者部分表一次性的全部同步至Elasticsearch,並且支援後續的即時增量同步處理模式,將新增資料持續同步至Elasticsearch。

2020.12.30

全部地區。

MySQL整庫即時同步至Elasticsearch

09月

功能名稱

功能描述

發布時間

發布地區

相關文檔

DataWorksData Integration新增即時同步功能。

提供的即時資料同步功能,可以將源端資料庫中部分或全部表的資料變化即時同步至目標資料庫中,實現目標庫即時保持和源庫的資料對應。利用解決方案可以實現全增量一體化同步。

2021.4.15

全部地區。

07月

功能名稱

功能描述

發布時間

發布地區

相關文檔

OpenAPI公測,自訂DataWorks功能。

DataWorks開放租戶、中繼資料、資料開發、營運中心、資料品質、資料服務等API,讓您更加自由地使用DataWorks。

說明

您需要購買DataWorks企業版及以上版本,才可以使用OpenAPI功能。

2020.07.16

華東1(杭州)、華東2(上海)、華南1(深圳)、華北2(北京)和華北3(張家口)。

DataWorks OpenAPI概述

遷移助手公測。

遷移助手支援遷移周期任務、手動任務、資源、函數、資料來源、表中繼資料、臨時查詢和組件等對象。您可以根據業務需求,選擇全量匯出、增量匯出或自選匯出等方式匯出DataWorks中的開發成果。

2020.07

東1(杭州)、華東2(上海)、華北2(北京)、華北3(張家口)、華南1(深圳)、西南1(成都)和新加坡。

遷移助手

資料服務更新。

DataWorks資料服務更新發布全新的分類樹結構。

2020.07.28

  • 函數及過濾器功能僅支援在華東2(上海)地區使用,且您需要購買DataWorks專業版及以上版本。

  • 服務編排功能僅支援在華東2(上海)地區使用,且您需要購買DataWorks企業版及以上版本。

資料服務

06月

功能名稱

功能描述

發布時間

發布地區

相關文檔

從資料來源查詢功能。

您可以在編輯試算表頁面,使用從資料來源查詢功能,快速從資料來源讀取資料進行分析。

2020.06.09

華東2(上海)。

分析資料

04月

功能名稱

功能描述

發布時間

發布地區

相關文檔

營運中心支援電話警示功能。

營運中心支援短信郵件电话三種警示方式。

重要

您需要購買DataWorks專業版及以上版本,才可以使用電話警示功能。

2020.04.15

全部地區。

規則管理