すべてのプロダクト
Search
ドキュメントセンター

DataWorks:リリースノート

最終更新日:Oct 31, 2025

このトピックでは、DataWorks の機能リリースとドキュメントの更新について説明します。

2025

10月

機能

説明

リリース日

対象リージョン

範囲

関連ドキュメント

DataWorks OpenData

DataWorks OpenData は、一元化された統一メタデータコレクションを提供します。これには、現在のテナント内のテーブル、ノード、インスタンス、ワークスペース、メンバー、プロジェクトなどのオブジェクトに関する詳細情報が含まれます。MaxCompute 計算リソースにバインドされたワークスペースに OpenData をインストールすることで、MaxCompute パッケージを介してメタデータを承認および共有できます。これにより、効率的なデータガバナンスと分析のために、標準化され追跡可能なメタデータが可能になります。

2025-10-14

すべてのリージョン

DataWorks Enterprise Edition のユーザー

9月

機能

説明

リリース日

対象リージョン

範囲

関連ドキュメント

DataWorks リソースグループでの LLM サービスのデプロイと使用

DataWorks LLM サービスは、効率的なモデルデプロイメント、安全な通信、簡単な呼び出しのための統一ソリューションを提供します。DataWorks サーバーレスリソースグループを使用してモデルをデプロイし、データ開発タスクで直接呼び出すことができます。すべてのトラフィックは PrivateLink チャネルを介して送信されるため、データはドメイン内に留まり、セキュリティが強化されます。

2025-09-22

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (ウランチャブ)、中国 (深セン)、中国 (香港)、日本 (東京)、シンガポール、マレーシア (クアラルンプール)、インドネシア (ジャカルタ)、ドイツ (フランクフルト)、米国 (シリコンバレー)、および米国 (バージニア)

指定されたリージョンのすべてのユーザー

8月

機能

説明

リリース日

対象リージョン

範囲

関連ドキュメント

EMR Serverless Spark 計算リソースが OpenLDAP と EMR Kyuubi をサポート

EMR Serverless Spark 計算リソースは、OpenLDAP アカウントマッピングと Kyuubi 構成をサポートするようになりました。これにより、権限をより効率的に管理し、EMR Kyuubi ノードタスクを開発できます。

2025-08-14

すべてのリージョン

新バージョンの Data Studio のパブリックプレビューに参加しているユーザー

EMR Serverless Spark 計算リソースをバインドする

Notebook ノードがクイック接続のための Magic コマンドをサポート

Notebooks では、Python セルで Magic コマンドを使用して、Livy サービスを迅速に作成および開始できます。これにより、MaxCompute Spark および EMR Serverless Spark 計算リソースでの効率的な開発とデバッグが可能になります。

2025-08-07

すべてのリージョン

新バージョンの Data Studio のパブリックプレビューに参加しているユーザー

Notebooks を使用した開発

7月

機能

説明

リリース日

対象リージョン

範囲

関連ドキュメント

Data Studio のノードスケジューリング構成にコンピューティングクォータパラメーターを追加

Data Studio は、MaxCompute SQL および MaxCompute Script ノードのスケジューリング構成でコンピューティングクォータの設定をサポートします。

2025-07-31

すべてのリージョン

新バージョンの Data Studio のパブリックプレビューに参加しているユーザー

ノードスケジューリング

Data Studio がクローンおよびバージョンロールバック機能を追加

Data Studio は、ワークフロー、ノード、コンポーネントなどのデータオブジェクトのクローン作成とバージョンロールバックをサポートします。これにより、履歴バージョンの迅速な再利用と復元が可能になります。

2025-07-31

すべてのリージョン

新バージョンの Data Studio のパブリックプレビューに参加しているユーザー

データセットの使用

Data Studio は、Shell ノード、Python ノード、Notebooks、および個人開発環境でデータセットをサポートするようになりました。

2025-07-28

すべてのリージョン

新バージョンの Data Studio のパブリックプレビューに参加しているユーザー

データセットの使用

データセットの管理

DataWorks はデータセットをサポートするようになり、画像やドキュメントなどの非構造化データのバージョン管理と制御が可能になりました。

2025-07-28

すべてのリージョン

すべてのユーザー

データセットの管理

Data Umbrella

Data Umbrella のエントリポイントが更新されました。

変更前: [すべてのプロダクト] > [データガバナンス] > [Data Umbrella]

変更後: [すべてのプロダクト] > [データガバナンス] > [セキュリティセンター]セキュリティセンターの左側のナビゲーションウィンドウで、[機密データ管理] をクリックします。

2025-07-10

中国 (上海)、中国 (深セン)、中国 (北京)、および中国 (成都)

指定されたリージョンのすべてのユーザー

-

Data Studio がトリガーベースのワークフローを追加

トリガーベースのワークフローは、固定のスケジューリングサイクルを持たないシナリオに適しています。手動で実行することも、イベントによってトリガーすることもできます。

2025-07-07

中国 (杭州)、中国 (ウランチャブ)、および中国 (深セン)

新バージョンの Data Studio のパブリックプレビューに参加しているユーザー

6月

機能

説明

リリース日

対象リージョン

範囲

関連ドキュメント

従量課金リソースグループをサブスクリプション課金方法に変換

従量課金のサーバーレスリソースグループをサブスクリプション課金モデルに変換できるようになりました。

2025-06-19

すべてのリージョン

すべてのユーザー

サーバーレスリソースグループの使用

データ同期

ソースが MySQL または PolarDB で、ターゲットが MaxCompute であるリアルタイムの完全データベース同期タスクの場合、関数式を使用してターゲットテーブルのフィールドに値を割り当てることができるようになりました。

2025-06-11

すべてのリージョン

すべてのユーザー

関数式を使用してターゲットテーブルのフィールドに値を割り当てる

PAI Flow

PAI Flow は、エンドツーエンドの機械学習ワークフロー開発機能を提供します。PAI の ビジュアル化モデリング (Designer) と同じワークフロー機能を提供し、定期的なワークフローのスケジューリングを可能にします。

2025-06-10

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (ウランチャブ)、中国 (深セン)、中国 (香港)、シンガポール、インドネシア (ジャカルタ)、日本 (東京)、ドイツ (フランクフルト)、米国 (シリコンバレー)、および米国 (バージニア)

新バージョンの Data Studio のパブリックプレビューに参加しているユーザー

PAI Flow の設定方法

スモークテスト

新しい Data Studio はスモークテストをサポートするようになりました。この機能は、スケジュールされたノードタスクのパラメーター置換ロジックと実行結果が期待どおりであるかどうかを検証し、基本的な構成エラーが本番データに影響を与えるのを防ぎます。

2025-06-10

すべてのリージョン

すべてのユーザー

スモークテスト

O&M ダッシュボードが手動トリガーノードのサポートを追加

O&M 画面で、手動でトリガーされたビジネスプロセスと内部タスクインスタンスの実行ステータスを表示できるようになりました。

2025-06-04

すべてのリージョン

すべてのユーザー

O&M ダッシュボードページで統計を表示する

5月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

個人開発環境

個人開発環境でカスタム DataWorks イメージを作成すると、対応する MaxCompute カスタムイメージが自動的に生成されます。

2025-05-23

すべてのリージョン

新バージョンの Data Studio のパブリックプレビューに参加しているユーザー

個人開発環境で MaxCompute カスタムイメージをビルドする

コードレビュー

コードレビューは、手動介入によって本番コードを最適化します。定期的な本番タスクのコード品質を向上させ、本番環境のコードが標準に準拠していることを保証します。タスクを本番環境にデプロイする前に、手動のコードレビューを要求できます。有効にすると、レビューに合格したタスクのみがデプロイできます。

2025-05-23

すべてのリージョン

新バージョンの Data Studio のパブリックプレビューに参加しているユーザー

コードレビュー

4月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

DataWorks での Lindorm の使用

Lindorm 計算リソースをワークスペースに関連付けることができます。関連付け後、Lindorm Spark および Lindorm Spark SQL ノードを使用して DataWorks でタスクを開発できます。Data Map で Lindorm のデータリネージを管理および維持できます。

2025-04-18

中国 (杭州)、中国 (上海)、中国 (北京)、および中国 (深セン)

新バージョンの Data Studio のパブリックプレビューに参加しているユーザー

Data Integration

MongoDB 6.x および 7.x データソースがサポートされています。

2025-04-14

すべてのリージョン

すべてのユーザー

MongoDB データソース

旧バージョンの DataStudio または新バージョンの Data Studio

MaxCompute と Hologres 間のメタデータマッピングとデータ同期がサポートされています。

2025-04-10

すべてのリージョン

すべてのユーザー

旧バージョンの DataStudio または新バージョンの Data Studio

DataWorks Agent がリリースされました。DataWorks Agent を使用して、自然言語対話に基づくデータ開発を実装できます。

2025-04-08

すべてのリージョン

すべてのユーザー

DataWorks Agent

3月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

Data Integration

Milvus データソースがサポートされています。

2025-03-27

すべてのリージョン

すべてのユーザー

Data Integration

MySQL データベース内のすべてのデータを LogHub にリアルタイムで同期することがサポートされています。

2025-03-12

すべてのリージョン

すべてのユーザー

Operation Center

Copilot ベースのインテリジェント検索とビュー保存機能がサポートされています。

2025-03-03

すべてのリージョン

すべてのユーザー

2月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

Operation Center

インテリジェント診断タスクの実行ログで内部 IP アドレスを使用してアクセスされる E-MapReduce (EMR) の Web UI に、インターネット経由でアクセスできるようになりました。

2025-02-26

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深セン)、中国 (香港)、日本 (東京)、シンガポール、マレーシア (クアラルンプール)、インドネシア (ジャカルタ)、ドイツ (フランクフルト)、米国 (シリコンバレー)、米国 (バージニア)、および UAE (ドバイ)

DataWorks Professional Edition またはそれ以上のエディションのユーザー

インテリジェント診断

Operation Center

EMR ノードがベースラインに関連付けられ、ベースラインが有効になっている場合、旧バージョンの DataStudio または新バージョンの DataStudio で EMR ノードに ENABLE_TASK_PRIORITY パラメーターを設定して、EMR ノードのスケジューリングに使用される YARN キューの優先度を制御できます。

2025-02-14

すべてのリージョン

すべてのユーザー

ベースラインと YARN キュー間の優先度マッピングを設定する

旧バージョンの DataStudio または新バージョンの Data Studio

PyODPS 3 ノードの PyODPS バージョンは、旧バージョンの DataStudio または新バージョンの DataStudio でアップグレードできます。

2025-02-14

すべてのリージョン

すべてのユーザー

DataWorks Copilot

DataWorks Copilot では、次の DeepSeek モデルがサポートされています: DeepSeek-R1-671B および DeepSeek-R1-Distill-Qwen-32B

2025-02-14

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深セン)、および中国 (成都)

すべてのユーザー

DataWorks Copilot Ask モード

DataWorks Copilot

コードの最適化とコードテスト機能は DataWorks Copilot でサポートされています。

2025-02-14

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深セン)、中国 (成都)、シンガポール、マレーシア (クアラルンプール)、およびインドネシア (ジャカルタ)

すべてのユーザー

DataWorks Copilot Ask モード

個人開発環境

Data Studio では個人開発環境がサポートされています。

  • GPU イメージに基づいて個人開発環境インスタンスを作成できます。GPU イメージは、TensorFlow や PyTorch などの深層学習フレームワークに適しています。

  • 個人開発環境インスタンスに対して、自動シャットダウンポリシーと自動シャットダウン設定を構成できます。

2025-02-12

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

個人開発環境

Operation Center

自動再実行は、自動 O&M 機能でサポートされています。

2025-02-10

すべてのリージョン

すべてのユーザー

自動 O&M

Data Studio の新しいノードタイプ

SUB_PROCESS ノードは Data Studio でサポートされています。SUB_PROCESS は、ワークフロー内で別のワークフローを参照するために使用できる特別なノードタイプです。SUB_PROCESS を使用すると、複雑なタスクを複数のサブタスクに分割できます。各サブタスクを独立して定義および管理できるため、タスクの保守性と再利用性が向上します。

2025-02-06

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

SUB_PROCESS ノード

1月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

新しいデータソースタイプ

PolarDB-O (シャーディング) データソースがサポートされています。

2025-01-14

すべてのリージョン

すべてのユーザー

シャーディングされたデータベースとテーブルの同期

旧バージョンリソースグループのゾーン変更

旧バージョンリソースグループのゾーンを変更できます。これにより、リソースのディザスタリカバリ能力を強化し、障害に迅速かつ便利に対応できます。

2025-01-02

すべてのリージョン

すべてのユーザー

2024

12月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

Data Studio の新しいノードタイプ

ADB Spark SQL ノードは Data Studio でサポートされています。ADB Spark SQL ノードは、AnalyticDB Spark SQL タスクを開発および定期的にスケジュールし、AnalyticDB Spark SQL タスクを他のタイプのタスクと統合するために使用できます。

2024-12-19

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

ADB Spark SQL ノード

Data Studio の新しいノードタイプ

ADB Spark ノードは Data Studio でサポートされています。ADB Spark ノードは、AnalyticDB Spark タスクを開発および定期的にスケジュールし、AnalyticDB Spark タスクを他のタイプのタスクと統合するために使用できます。

2024-12-19

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

ADB Spark ノード

Hologres 動的テーブルの使用

Hologres 動的テーブル機能は DataWorks データカタログと統合されています。これにより、DataWorks データカタログは、動的テーブル管理、スケジューリング依存関係の構成、タスクメンテナンスなどの操作のための可視化ツールセットを提供できます。

2024-12-13

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

Hologres 動的テーブルの使用

新しいデータソースタイプ

TiDB データソースがサポートされています。

2024-12-04

すべてのリージョン

すべてのユーザー

TiDB データソース

Data Quality

Data Quality にフォーマット検証カテゴリのモニタリングルールテンプレートが追加されました。モニタリングルールテンプレートでカスタム正規表現を設定して、目的のデータ形式を定義できます。メールアドレス、電話番号、携帯電話番号、ID カード番号などのオブジェクト用の組み込みモニタリングルールテンプレートが提供されています。

2024-12-02

すべてのリージョン

すべてのユーザー

組み込みルールテンプレートの表示

11月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

データ同期

ApsaraDB for OceanBase データベース内のすべてのデータを、OceanBase MySQL テナントによってリアルタイムで MaxCompute に同期できます。

2024-11-21

すべてのリージョン

すべてのユーザー

ApsaraDB for OceanBase データベースのすべてのデータをリアルタイムで MaxCompute に同期する

Data Map

Data Map が提供するメタデータ収集機能を使用して、AnalyticDB for Spark データソースのメタデータを収集および管理できます。

2024-11-21

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

メタデータ取得

Data Map

Data Map の MaxCompute テーブルの詳細ページでデータインサイトタスクを作成して、詳細なデータ分析と解釈に基づいてデータの統計と分布を取得できます。

2024-11-21

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (ウランチャブ)、および中国 (深セン)

すべてのユーザー

MaxCompute テーブルデータ

データ資産ガバナンス

データガバナンスセンターはデータ資産ガバナンスにアップグレードされました。データ資産ガバナンスは、設定されたガバナンス計画に基づいて、データストレージ、タスクコンピューティング、コード開発、データ品質の各ディメンションで処理が必要な問題を検出できます。データ資産ガバナンスは、データガバナンスの有効性を評価するためのヘルススコアを提供し、さまざまな観点からガバナンス結果を可視化します。これにより、効率的な方法でガバナンス目標を達成できます。データ資産ガバナンスは、ビジネス資産管理、資産分析、タスクのリソース消費詳細、コスト見積もりなどの機能も提供し、さまざまなリソースの使用詳細をよりよく理解するのに役立ちます。

2024-11-14

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深セン)、中国 (成都)、中国 (香港)、シンガポール、マレーシア (クアラルンプール)、インドネシア (ジャカルタ)、ドイツ (フランクフルト)、米国 (シリコンバレー)、および米国 (バージニア)

すべてのユーザー

データ資産ガバナンス

計算資源

AnalyticDB for Spark 計算リソースをワークスペースに関連付けることができます。

2024-11-05

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

計算リソースの関連付け

個人開発環境を Git リポジトリに接続する

個人開発環境を Git リポジトリと統合して、コードのバージョン管理とチームコラボレーションを容易にすることができます。

2024-11-04

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

個人開発環境を Git リポジトリに接続する

10月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

イメージ管理

カスタムイメージは DataWorks で永続的なイメージとして作成できます。これにより、ノードでタスクを実行するたびに同じイメージ環境を使用でき、イメージ環境を繰り返しデプロイする必要がなくなります。これにより、ランタイム環境の一貫性が確保され、タスクの実行時間、計算コスト、およびトラフィックコストが削減されます。

2024.10.18

中国 (北京)、中国 (上海)、中国 (深セン)、中国 (杭州)、中国 (香港)、中国 (張家口)、シンガポール、マレーシア (クアラルンプール)、インドネシア (ジャカルタ)、日本 (東京)、ドイツ (フランクフルト)、英国 (ロンドン)、米国 (シリコンバレー)、および米国 (バージニア)

すべての DataWorks ユーザー

カスタムイメージ

サーバーレス同期タスクのサポート

サーバーレス同期タスクは Data Integration でサポートされています。サーバーレス同期タスクにリソースグループを設定する必要はありません。これにより、ビジネスにのみ集中できます。

2024.10.12

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深セン)、中国 (香港)、英国 (ロンドン)、米国 (シリコンバレー)、米国 (バージニア)、日本 (東京)、ドイツ (フランクフルト)、およびマレーシア (クアラルンプール)

すべての DataWorks ユーザー

サーバーレス同期タスクの設定

9月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

新しいタイプのリアルタイム同期タスク

Simple Log Service Logstore から Data Lake Formation (DLF) 2.0 へのデータのリアルタイム同期がサポートされています。データは Paimon 形式で DLF 2.0 に書き込まれ、データ同期中に簡単なデータ処理がサポートされます。

2024.9.13

すべてのリージョン

すべての DataWorks ユーザー

LogHub (SLS) 単一テーブルの Data Lake Formation へのリアルタイム同期

リアルタイム同期タスクの実行中の自動リソーススケーリング

リアルタイム同期タスクに設定されたリソースは、タスクの実行中に自動的にスケーリングできます。タスクを停止する必要はありません。調整計画を設定するだけで済みます。システムは、タスクの実行中に調整計画に基づいてタスクのリソースを調整します。

2024.9.13

すべてのリージョン

すべての DataWorks ユーザー

リソースチューニングのための動的スケーリング条件

8月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

新しいタイプのリアルタイム同期タスク

MySQL データベースから SelectDB または Apache Doris へのデータのリアルタイム同期がサポートされています。

2024.8.29

すべてのリージョン

すべての DataWorks ユーザー

MySQL データベースのすべてのデータをリアルタイムで SelectDB に同期する

Hologres の権限管理

DataWorks セキュリティセンターでは、ユーザーが Hologres データにアクセスするための権限を管理できます。承認された ID の設定、Hologres テーブルの権限要求、権限要求の処理、権限要求レコードと要求処理レコードの表示ができます。

2024.8.22

すべてのリージョン

すべての DataWorks ユーザー

Hologres の権限を管理する

SQL クエリ結果の DingTalk シートへのエクスポート

DataWorks の SQL クエリ結果を DingTalk シートにエクスポートできます。DataWorks で SQL クエリを実行した後、DingTalk アプリケーションを使用してクエリ結果を DingTalk シートにエクスポートできます。これにより、クエリ結果を Excel ファイルとしてダウンロードすることによって引き起こされるデータセキュリティの問題を防ぎます。

2024.8.14

中国 (張家口)

中国 (成都)

すべての DataWorks ユーザー

MaxCompute データソースへのアクセスに使用されるデフォルトのアクセス ID に対する権限要件の引き下げ

MaxCompute データソースへのアクセスに使用されるデフォルトのアクセス ID に対する権限要件が引き下げられました。MaxCompute データソースを追加する際に [デフォルトのアクセス ID] パラメーターを [Alibaba Cloud RAM ユーザー] に設定する場合、関連する RAM ユーザーが関連する MaxCompute プロジェクトの Admin または Super_Administrator ロールの権限を持っていることを確認する必要があります。権限要件が引き下げられる前は、関連する RAM ユーザーに AdministratorAccess ポリシーがアタッチされている必要がありました。

2024.8.8

すべてのリージョン

すべての DataWorks ユーザー

MaxCompute 計算リソースのアタッチ

DataWorks Enterprise Edition での CloudSSO のサポート

CloudSSO は DataWorks Enterprise Edition でサポートされています。CloudSSO を使用すると、サードパーティまたは自己管理の ID プロバイダー (IdP) を使用して Alibaba Cloud 管理コンソールにログインし、DataWorks を使用できます。

2024.8.8

すべてのリージョン

すべての DataWorks ユーザー

DataWorks エディションの機能

7月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

RAM ポリシードキュメントの更新

ListUserResources 権限が AliyunDataWorksReadOnlyAccess ポリシーに追加され、すべてのユーザーのすべての DataWorks リソースに関する情報を表示できるようになりました。

2024.7.10

すべてのリージョン

すべての DataWorks ユーザー

EMR クラスターの登録に関連する機能の更新

EMR クラスターを DataWorks に登録するために、次の機能がサポートされています:

  • ビジネス要件に基づいて Kyuubi 接続情報を設定します。

  • EMR Serverless Spark クラスターを登録します。

2024.7.10

EMR Serverless Spark をサポートする唯一のリージョンである中国 (張家口)

すべての DataWorks ユーザー

DataStudio の新しいノードタイプ

CDH Spark SQL ノードは DataStudio でサポートされています。CDH Spark SQL ノードは、CDH Spark SQL タスクを開発および定期的にスケジュールし、タスクを他のタイプのタスクと統合するために使用できます。

2024.7.10

すべてのリージョン

すべての DataWorks ユーザー

CDH Spark SQL ノードの作成

6月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

Data Integration の新しい同期リンク

MySQL データベースのすべてのデータを、Data Integration を使用してオフラインモードまたはリアルタイムで StarRocks に同期できます。

2024.06.28

すべてのリージョン

すべての DataWorks ユーザー

DataStudio でのデータプッシュノードの作成

DataStudio のワークフローでは、データプッシュノードを作成し、データを処理してデータテーブルを生成するノードの子孫ノードとして設定できます。その後、データプッシュノードを使用して、先祖ノードによって生成されたデータをメッセージカードの形式で DingTalk または Lark グループに定期的にプッシュできます。

説明

データプッシュノードを使用するには、スケジューリング用のリソースグループをアップグレードするために、チケットを送信してテクニカルサポートに連絡する必要があります。

2024.6.28

  • 中国 (杭州)

  • 中国 (上海)

  • 中国 (北京)

  • 中国 (深セン)

  • 中国 (成都)

  • 中国 (香港)

  • シンガポール

  • マレーシア (クアラルンプール)

  • 米国 (シリコンバレー)

  • 米国 (バージニア)

  • ドイツ (フランクフルト)

すべての DataWorks ユーザー

ワークフローでデータプッシュノードを設定するためのベストプラクティス

サーバーレスリソースグループのリリース

DataWorks のリソース管理を容易にし、ユーザーエクスペリエンスを向上させるために、DataWorks にサーバーレスリソースグループが導入されました。サーバーレスリソースグループは、スケジューリング用の専用リソースグループ、Data Integration 用の専用リソースグループ、および DataService Studio 用の専用リソースグループのコア機能を同時に実装できます。データ同期、タスクのスケジューリングと実行、API の呼び出しと管理などの操作は、1 つのサーバーレスリソースグループのみを使用して実行できます。

2024.6.11

  • 中国 (北京)

  • 中国 (上海)

  • 中国 (深セン)

  • 中国 (杭州)

  • 中国 (香港)

  • 中国 (張家口)

  • シンガポール

  • マレーシア (クアラルンプール)

  • インドネシア (ジャカルタ)

  • 日本 (東京)

  • ドイツ (フランクフルト)

  • 英国 (ロンドン)

  • 米国 (シリコンバレー)

  • 米国 (バージニア)

すべての DataWorks ユーザー

Lindorm 分散処理システム (LDPS) に基づくタスク開発の新しいベストプラクティス

LDPS は CDH と互換性があります。CDH クラスターを DataWorks に登録し、LDPS 接続情報を設定した後、DataWorks でインタラクティブ SQL クエリ、SQL タスク開発、JAR タスク実行などの操作を LDPS に基づいて実行できます。

2024.6.5

すべてのリージョン

すべての DataWorks ユーザー

LDPS に基づくタスクの開発

データ同期用の新しいデータソースタイプ

データ同期用に Azure Blob Storage データソースがサポートされています。

2024.6.3

すべてのリージョン

すべての DataWorks ユーザー

Azure Blob Storage データソース

5月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

Object Storage Service (OSS) からの MySQL バイナリログの読み取りをサポート

MySQL バイナリログは OSS から読み取ることができます。

MySQL データソースを追加する際、[設定モード][Alibaba Cloud インスタンスモード] に設定し、RDS for MySQL インスタンスが DataWorks ワークスペースと同じリージョンにある場合、[OSS バイナリログ読み取りを有効にする] を有効にできます。この機能を有効にすると、RDS バイナリログにアクセスできない場合、システムは OSS からバイナリログを取得しようとし、リアルタイム同期タスクの中断を防ぎます。

2024.5.24

すべてのリージョン

すべての DataWorks ユーザー

MySQL データソース

Data Quality サービスの更新

Data Quality サービスが更新されました。更新後、モニタリングルールに基づいてテーブル内の特定の範囲のデータをチェックできます。これにより、データ品質モニタリングのプロセスが最適化されます。

2024.5.21

新しいバージョンの Data Quality は段階的に展開されています。リージョンの可用性については、実際のコンソールを参照してください。お使いのリージョンで新しい Data Quality 機能がまだ利用できない場合は、「Data Quality」をご参照ください。

すべての DataWorks ユーザー

Data Quality (新バージョン)

Data Integration の新しい同期リンク

Hologres データベースのすべてのデータを、オフラインモードで別の Hologres データベースに同期できます。

2024.5.20

すべてのリージョン

すべての DataWorks ユーザー

Hologres から Hologres へのデータベース全体のオフライン同期

DataWorks によるホストへのリモートアクセスとホスト上でのスクリプト実行のトリガーをサポート

DataWorks で特定の SSH データソースに基づいて SSH ノードを作成および使用して、データソースに接続されているホストにリモートアクセスし、ホスト上でスクリプトの実行をトリガーできます。

2024.5.15

すべてのリージョン

すべての DataWorks ユーザー

DataStudio での EMR Kyuubi ノードのサポート

EMR Kyuubi ノードは DataStudio でサポートされています。EMR Kyuubi ノードは、Kyuubi タスクを開発および定期的にスケジュールし、Kyuubi タスクを他のタイプのタスクと統合するために使用できます。

2024.5.11

すべてのリージョン

すべての DataWorks ユーザー

EMR Kyuubi ノードの作成

DataStudio の新しいタイプのデータベースノード

DRDS ノード、PolarDB for MySQL ノード、Doris ノードなど、複数のタイプのデータベースノードが DataStudio でサポートされています。これらのタイプのノードを使用して、関連するタイプのタスクを開発および定期的にスケジュールし、タスクを他のタイプのタスクと統合できます。

2024.5.11

すべてのリージョン

すべての DataWorks ユーザー

4月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

PostgreSQL データソース追加時の SSL 認証設定

データ同期用に PostgreSQL データソースを追加する際に SSL 認証を設定できます。

2024.4.26

すべてのリージョン

すべての DataWorks ユーザー

PostgreSQL データソース

データガバナンスセンターでの Hologres データソースのサポート

Hologres データソースはデータガバナンスセンターでサポートされています。

データガバナンスセンターで Hologres データソースを使用する前に、Data Map で Hologres のメタデータを収集する必要があります。詳細については、「メタデータ取得」をご参照ください。

2024.4.24

Hologres データソースは、次のリージョンでのみデータガバナンスセンターをサポートします: 中国 (北京)、中国 (上海)、中国 (杭州)、および中国 (深セン)。

すべての DataWorks ユーザー

データガバナンスセンターの概要

データガバナンスセンターでのマテリアライズドビューのサポート

DataWorks は、インテリジェントな推奨事項に基づくマテリアライズドビューの自動ガバナンスをサポートします。これは、多数の類似したサブクエリを含む頻繁なビッグデータコンピューティングタスクのためのインテリジェントで自動化されたソリューションです。マテリアライズドビューでインテリジェントな推奨事項機能を有効にすると、DataWorks は MaxCompute の類似したサブクエリを自動的に識別および分類し、マテリアライズドビューを作成するための推奨事項を生成できます。ビジネス要件に基づいて数回のクリックでマテリアライズドビューを作成できます。これにより、コンピューティング効率が大幅に向上し、コンピューティングリソースが節約されます。

2024.4.12

すべてのリージョン

すべての DataWorks ユーザー

マテリアライズドビューの自動ガバナンス

Alibaba Cloud アカウントまたは RAM ユーザーと CDH または Cloudera Data Platform (CDP) クラスターの OpenLDAP アカウントとのマッピングのサポート

CDH または CDP クラスターを DataWorks に登録する際、ビジネス要件に基づいて Alibaba Cloud アカウントまたは RAM ユーザーと CDH または CDP クラスターの OpenLDAP アカウントとのマッピングを設定できます。マッピングが設定されると、Alibaba Cloud アカウントまたは RAM ユーザーによって送信された CDH または CDP タスクは、マッピングされた OpenLDAP アカウントによって実行されます。CDH クラスターで異なる Alibaba Cloud アカウントまたは RAM ユーザーがアクセスできるデータの権限を分離したい場合は、OpenLDAP アカウントマッピングタイプを使用できます。

2024.4.8

中国 (北京)、中国 (上海)、中国 (杭州)、中国 (深セン)、中国 (張家口)、および中国 (成都)

すべての DataWorks ユーザー

テナントメンバーアカウントと CDH または CDP クラスターアカウント間のマッピングを設定する

3月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

データバックフィル機能の新バージョン

データバックフィル機能の新バージョンがリリースされました。自動トリガータスクが開発、コミット、デプロイされると、自動トリガータスクはスケジューリング設定に基づいて実行されます。指定した時間範囲で自動トリガータスクを実行したい場合は、タスクのデータをバックフィルできます。自動トリガータスクの過去または未来の期間のデータをバックフィルして、時間ベースのパーティションにデータを書き込むことができます。新バージョンでは、次のデータバックフィル方法がサポートされています:

2024.3.28

すべてのリージョン

すべての DataWorks ユーザー

データのバックフィルとデータバックフィルインスタンスの表示 (新バージョン)

Open Platform での Function Compute に基づく拡張機能の開発とデプロイ

DataWorks の拡張機能にカスタムイベントメッセージロジックを設定して、不適切な動作の傍受やブロックなど、ユーザーの動作を管理できます。Function Compute を使用して拡張機能を開発およびデプロイすると、特定のイベントメッセージが関連する Function Compute サービスに自動的に送信されます。次の点に注意してください:

  • 操作は簡単です。拡張機能をデプロイするために必要な関数は 1 つだけです。

  • Function Compute の使用には料金がかかります。詳細については、「課金の概要」をご参照ください。

  • Function Compute に基づいてデプロイされた拡張機能は、データダウンロードの事前イベントのみを処理できます。

2024.3.19

  • 中国 (北京)

  • 中国 (杭州)

  • 中国 (上海)

  • 中国 (張家口)

  • 中国 (深セン)

  • 中国 (成都)

  • 米国 (シリコンバレー)

  • 米国 (バージニア)

  • ドイツ (フランクフルト)

  • 日本 (東京)

  • 中国 (香港)

  • シンガポール

DataWorks Enterprise Edition のユーザー

Function Compute に基づく拡張機能の開発とデプロイ

データモデリングにおけるモデルのカスタム公開ポリシーのサポート

データモデリングで、ビジネス要件に基づいてモデルの公開ポリシーを定義できます。公開ポリシーを有効にすると、モデルを公開する際に、ポリシーの設定に基づいてビジネス要件を満たす公開モードを選択できます。

2024.3.12

すべてのリージョン

データモデリングサービスを有効にした DataWorks ユーザー

公開ポリシー管理

2月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

DataWorks での CDP または CDH タスクの開発に関する使用上の注意の追加

DataWorks での CDP または CDH タスクの開発に関する使用上の注意が追加されました。使用上の注意には、基本的な開発プロセス、料金の説明、環境の準備、および権限管理が含まれます。

2024.2.21

すべてのリージョン

すべての DataWorks ユーザー

DataWorks での CDP または CDH タスクの開発に関する使用上の注意

DataService Studio で Alibaba Cloud インスタンスモードで追加された StarRocks データソースのサポート

EMR Serverless StarRocks クラスターを作成した後、クラスターを Alibaba Cloud インスタンスモードで DataWorks に StarRocks データソースとして追加できます。データソースは DataWorks DataService Studio で API に迅速にカプセル化して、データ共有と公開を実現できます。

2024.2.20

すべてのリージョン

すべての DataWorks ユーザー

データソースの追加

Data Map のデータ開発コードの検索機能

データ開発コードの検索機能は DataWorks Data Map でサポートされています。この機能を使用して、ワークスペースをまたいでデータ開発コードを検索し、キーワードに基づいて目的のコードを特定できます。これにより、開発効率が向上し、プロジェクトの冗長性が削減されます。

2024.2.20

すべてのリージョン

DataWorks Standard Edition 以上のユーザー

コード

データアップロードおよびダウンロード機能のサポート

データアップロードおよびダウンロード機能は DataWorks でサポートされています。オンプレミスの CSV ファイルと OSS オブジェクトを MaxCompute にアップロードして、処理および分析できます。DataWorks DataAnalysis などのサービスによってダウンロードされたアップロード済みファイルのリストとファイルのリストも管理できます。

2024.2.20

すべてのリージョン

すべての DataWorks ユーザー

DataStudio での CDH 関連ノードのサポート

CDH Hive、CDH Spark、CDH MR、CDH Presto、CDH Impala ノードなどの CDH 関連ノードは DataStudio でサポートされています。これらのノードを使用して、CDH 関連タスクを開発および定期的にスケジュールできます。

2024.2.19

すべてのリージョン

すべての DataWorks ユーザー

データセキュリティガードのシステム設定ページの新バージョン

システム設定ページで次の操作を実行できます:

  • コンテンツベースの機密データ識別を有効または無効にし、識別範囲を指定します。

  • ウォーターマーク付きファイルの保持期間を指定します。

  • 識別されたデータのセキュリティレベルを表示するかどうかを指定します。

  • アラート通知を受信するためのメールアドレスと Webhook URL を指定します。

上記の手順は、潜在的なセキュリティリスクを早期に特定して解決するのに役立ちます。

2024.2.6

すべてのリージョン

すべての DataWorks ユーザー

システム設定の構成

1月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

DataStudio と DataAnalysis でのマスクされたクエリ結果の表示

EMR テーブルのデータの分類と感度レベル分類、機密データ識別、およびマスクされたクエリ結果の表示は、データセキュリティガードでサポートされています。

DataStudio または DataAnalysis で SQL ステートメントを実行してデータをクエリした後の結果に機密データが含まれている場合、システムは特定のデータマスキングルールに基づいて機密データを自動的にマスクまたは暗号化し、マスクされたクエリ結果を返します。これにより、企業のデータセキュリティが向上します。

2024.1.25

すべてのリージョン

すべての DataWorks ユーザー

Data Map のリアルタイム同期リンクに関与するデータリネージの表示

次のリアルタイム同期リンクに関与するデータリネージは、Data Map で解析および表示できます:

  • MySQL から MaxCompute または Hologres へのリアルタイムデータ同期

  • Kafka から MaxCompute または Hologres へのリアルタイムデータ同期

  • LogHub から MaxCompute または Hologres へのリアルタイムデータ同期

  • PolarDB から MaxCompute へのリアルタイムデータ同期

リアルタイム同期リネージとバッチ同期リネージの組み合わせ分析は、データ転送状況を包括的に理解するのに役立ちます。

2024.1.15

すべてのリージョン

すべての DataWorks ユーザー

リネージの表示

2023

12月

機能

説明

リリース日

リージョン

範囲

リファレンス

DataStudio とのデータソースの関連付け

データソースまたはクラスターを DataStudio に関連付けることができます。関連付け後、データソースまたはクラスターを使用して、データモデリングを実行したり、オペレーションセンターでタスクを定期的にスケジュールしたりできます。また、データソースまたはクラスター内のデータを読み取り、データ開発操作を実行することもできます。

2023.12.29

すべてのリージョン

すべての DataWorks ユーザー

データ開発前の準備: 計算資源またはクラスターを DataStudio に関連付ける

計算資源のリリース

MaxCompute、Hologres、AnalyticDB for PostgreSQL、AnalyticDB for MySQL、および ClickHouse コンピュートエンジンは計算資源として管理され、EMR および CDH または CDP コンピュートエンジンはオープンソースクラスターとして管理されます。これにより、ユーザーエクスペリエンスが向上します。変更後、コンピュートエンジンの作成や変更など、コンピュートエンジンに関連する操作は、DataWorks コンソールの管理センターにある「コンピューティングリソース」または「オープンソースクラスター」ページで実行されます。

2023.12.29

すべてのリージョン

すべての DataWorks ユーザー

新しい拡張ポイントイベント

オープンプラットフォームに次の拡張ポイントイベントが追加されました:

  • DeleteProject: テナント内のワークスペース削除の事前イベント

  • ProjectDeleted: テナント内のワークスペース削除の事後イベント

  • DownloadResources: データダウンロードの事前イベント

2023.12.27

すべてのリージョン

すべての DataWorks ユーザー

拡張ポイントイベントの新しい適用範囲

拡張ポイントイベントの次の適用範囲が追加されました:

  • テナントレベル: テナントレベルのイベントはテナントに対して有効になります。

  • ワークスペースレベル: ワークスペースレベルのイベントは特定のワークスペースに対して有効になります。

拡張機能を登録する際、1 種類の拡張ポイントイベントのみを選択できます。

2023.12.22

  • 中国 (北京)

  • 中国 (杭州)

  • 中国 (上海)

  • 中国 (張家口)

  • 中国 (深圳)

  • 中国 (成都)

  • 米国 (シリコンバレー)

  • 米国 (バージニア)

  • ドイツ (フランクフルト)

  • 日本 (東京)

  • 中国 (香港)

  • シンガポール

すべての DataWorks ユーザー

データガバナンスセンターにおける SQL 効率最適化のための新しいチェック項目

データガバナンスセンターに 5 つのチェック項目が追加されました。これらのチェック項目には、MaxCompute、EMR Hive、および EMR Spark SQL タスク用の DescartesChecker、MasterTableOnConditionChecker、および Force Scan Checker が含まれます。これらのチェック項目は、研究開発段階での事前チェックとタイムリーな最適化を実行し、計算効率を向上させ、大量の計算資源の浪費を削減し、データ出力の適時性を確保するのに役立ちます。

2023.12.22

すべてのリージョン

すべての DataWorks ユーザー

チェック項目を設定する

StarRocks データソースの完全サポート

StarRocks データソースは、DataWorks の次のサービスで完全にサポートされています:

  • Data Integration: StarRocks データソースとの間のデータ同期がサポートされています。

  • DataStudio: StarRocks タスクの作成と定期的なスケジューリングがサポートされています。

  • DataAnalysis: StarRocks データのクエリと分析がサポートされています。

  • DataService Studio: StarRocks データテーブルを API にカプセル化できます。

  • データマップ: StarRocks メタデータをデータマップで管理、検索、表示できます。

2023.12.15

すべてのリージョン

すべての DataWorks ユーザー

新しい EMR Hadoop クラスターバージョンのサポート

DataWorks では、次の EMR Hadoop クラスターバージョンがサポートされています:

  • EMR-3.26.3

  • EMR-3.27.2

  • EMR-3.29.0

  • EMR-3.32.0

  • EMR-3.35.0

  • EMR-3.38.2

  • EMR-3.38.3

  • EMR-4.3.0

  • EMR-4.4.1

  • EMR-4.5.0

  • EMR-4.5.1

  • EMR-4.6.0

  • EMR-4.8.0

  • EMR-4.9.0

  • EMR-5.2.1

  • EMR-5.4.3

  • EMR-5.6.0

2023.12.15

すべてのリージョン

すべての DataWorks ユーザー

DataWorks での EMR ノード開発に関する使用上の注意

DataStudio のチェックノードの新しいチェック項目

DataStudio のチェックノードで新しいチェック項目がサポートされました。チェックノードを使用して、チェックポリシーに基づいて MaxCompute パーティションテーブル、FTP ファイル、および OSS オブジェクトの可用性を確認できます。チェックノードのチェックポリシーで指定された条件が満たされると、チェックノードのタスクは正常に実行されます。

タスクの実行がアイテムに依存する場合、チェックノードを使用してアイテムの可用性を確認し、タスクをチェックノードの子孫タスクとして設定できます。チェックノードのチェックポリシーで指定された条件が満たされると、チェックノードのタスクは正常に実行され、その子孫タスクがトリガーされて実行されます。

2023.12.08

すべてのリージョン

すべての DataWorks ユーザー

チェックノードを設定する

DataStudio での PAI DLC ノードのサポート

DataStudio で PAI DLC ノードがサポートされました。PAI DLC ノードを使用して、DLC タスクを定期的にスケジュールできます。

2023.12.08

すべてのリージョン

すべての DataWorks ユーザー

PAI DLC ノードの作成と使用

セキュリティセンターでのリスク識別ルールのサポート

セキュリティセンターでリスク識別ルールがサポートされました。セキュリティセンターでは、管理者がリスク識別機能を拡張機能として DataWorks に登録できます。これにより、拡張機能をリスク識別ルールとして使用して、ユーザー操作のリスクを識別できます。

デフォルトまたはカスタムのリスク識別ルールを使用して、データダウンロード操作のリスクを識別し、ビジネス要件に基づいてブロックまたは承認の応答ポリシーを設定できます。

2023.12.08

すべてのリージョン

すべての DataWorks ユーザー

リスク識別ルール

11月

機能

説明

リリース日

リージョン

範囲

リファレンス

DataStudio でのチェックノードのサポート

DataStudio でチェックノードがサポートされるようになりました。チェックノードを使用して、MaxCompute パーティションテーブルに特定のパーティションが存在するかどうか、またはパーティションにデータが書き込まれているかどうかを確認できます。タスクが MaxCompute パーティションテーブルに依存している場合、チェックノードを使用して、テーブル内のパーティションデータが最初に利用可能かどうかを確認できます。これにより、無効なデータが使用されるのを防ぎます。

2023.11.20

  • 中国 (成都)

  • 中国 (張家口)

  • 中国 (北京)

  • 中国 (上海)

  • マレーシア (クアラルンプール)

すべての DataWorks ユーザー

チェックノードの設定

8月

機能

説明

リリース日

リージョン

スコープ

関連情報

スケジューリング周期の指定に対応

スケジューリングカレンダー機能がサポートされています。スケジューリングカレンダー上の日付をスケジューリング日または非スケジューリング日としてマークすることで、スケジューリングサイクルを指定できます。

2023.08.24

すべてのリージョン

DataWorks Enterprise Edition のユーザー

スケジューリングカレンダーを設定する

データガバナンスセンターでのデータレイク開発連携におけるガバナンスのサポート

EMR、Data Lake Formation (DLF)、および DataWorks で構成されるデータレイク開発リンクで特定された課題に対して、プロアクティブなガバナンスがサポートされています。以下のガバナンス機能がサポートされています。

  • ガバナンスのヘルススコアの評価

  • R&D およびストレージディメンションにおけるガバナンス課題の自動特定

  • Hive SQL および Spark SQL に基づくイベント前のチェック

2023 年 08 月 24 日

  • 中国北部 2 (阿里政務)

  • 中国東部 2 (金融)

  • 中国 (上海)

  • 中国 (杭州)

  • 中国 (北京)

  • 中国 (深圳)

  • 中国 (成都)

  • 中国 (香港)

  • シンガポール

  • 米国 (シリコンバレー)

  • ドイツ (フランクフルト)

  • インドネシア (ジャカルタ)

DataWorks Enterprise Edition またはより高度なエディションのユーザー

データガバナンスセンターの概要

6月

機能

説明

リリース日

リージョン

範囲

リファレンス

Kafka から Hologres へのリアルタイム同期による抽出、変換、ロード (ETL) プロセスの実装

  • Kafka から Hologres へのリアルタイムデータ同期では、JSON 形式の Kafka データを解析し、他の基本的なデータ処理操作を実行して ETL プロセスを実装できます。

  • キーと値は指定された JSON パスから取得でき、動的に拡張できます。これは、Kafka データソースからのメッセージのフォーマットが変更されるシナリオに適しています。

  • タスク構成中のシミュレーション実行がサポートされています。これにより、宛先に書き込むデータが事前に正しく処理されるかどうかを確認できます。

2023.06.01

すべてのリージョン

すべての DataWorks ユーザー

Kafka データソース

MySQL データベースから OSS データレイクへの全データの Hudi 形式でのリアルタイム同期

MySQL データベース内のすべてのデータをリアルタイムで OSS データレイクに同期できます。データは Hudi 形式でデータレイクに書き込まれます。次の機能がサポートされています:

  • Alibaba Cloud DLF との自動統合により、管理用のメタデータを生成します。

  • インスタンスレベルの同期。一度に複数のソース MySQL データベースを選択できます。

  • 正規表現に基づくソース MySQL データベースとテーブルの選択。

  • データベースとテーブルの自動追加。ソース MySQL データベースとテーブルが追加されると、データは手動操作なしで自動的に OSS に同期されます。

2023.06.01

すべてのリージョン

すべての DataWorks ユーザー

OSS データソース

データ同期のための Amazon Relational Database Service (Amazon RDS) データソースのサポート

Amazon RDS データソースは、MySQL データソースと同じ方法でデータ同期のために追加できます。Amazon RDS データソースは、MySQL データソースと同じ機能を提供します。

2023.06.01

すべてのリージョン

すべての DataWorks ユーザー

MySQL データソース

4月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

データ分析結果の MaxCompute テーブルへの保存をサポート

データ分析結果を MaxCompute テーブルとして直接保存し、後続のクエリや共同分析に利用できます。データ分析結果を保存するためにテーブルを作成するコードを実行する必要はありません。

2023.4.20

すべてのリージョン

すべての DataWorks ユーザー

SQL クエリと分析

DataAnalysis での数百万件の SQL クエリ結果レコードのダウンロードをサポート

デフォルトでは、最大 10,000 件の SQL クエリ結果レコードをダウンロードできます。管理者は、セキュリティセンターでさまざまなエディションの上限を変更できます:DataWorks Standard Edition は 200,000 件、DataWorks Professional Edition は 2,000,000 件、DataWorks Enterprise Edition および DataWorks Ultimate Edition は 5,000,000 件です。ダウンロード機能を無効にすることもできます。

2023.4.18

すべてのリージョン

すべての DataWorks ユーザー

SQL クエリと分析

ビッグデータサービス向けのパブリックデータセットのリリース

DataWorks と MaxCompute を使用すると、Taobao、Fliggy、Ali Music、GitHub、TPC などのさまざまなプラットフォームにあるビッグデータおよび AI サービス向けのパブリックデータセットに基づいて、テラバイト級のデータを迅速に分析できます。

2023.4.11

すべてのリージョン

すべての DataWorks ユーザー

SQL クエリと分析

3月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

Data Governance Center でのガバナンス問題の通知をサポート

管理者と個人ユーザーは、日々のガバナンス問題に関する通知を設定できます。 これにより、システムはシステムメッセージ、E メール、DingTalk グループメッセージ、または Webhook URL を介して関連エンジニアに通知を送信でき、ガバナンス問題の処理が容易になります。

2023.3.15

すべてのリージョン

すべての DataWorks ユーザー

ガバナンス問題の定期的な通知を設定する

Data Governance Center のストレージディメンションにおける長期ライフサイクルガバナンス項目のサポート

Data Governance Center のストレージディメンションで、長期ライフサイクルガバナンス項目がサポートされるようになりました。 このガバナンス項目は、ユーザーが MaxCompute パーティションテーブルに適切なライフサイクルを指定して、ストレージリソースの浪費を削減するのに役立ちます。

2023.3.15

すべてのリージョン

すべての DataWorks ユーザー

ガバナンス問題の処理

DataService Studio が提供するアクセラレーションサービスの商用化

DataService Studio にアクセラレーションサービスソリューションが導入されました。 このソリューションを使用すると、MaxCompute からデータをエクスポートすることなく、MaxCompute データのクエリを高速化するオンライン API を作成できます。 これにより、クエリのパフォーマンスと効率が向上し、オンラインクエリの要件を満たすことができます。

2023.3.1

中国 (上海)、中国 (北京)、中国 (杭州)、および中国 (深セン)

すべての DataWorks ユーザー

API ベースのデータクエリのアクセラレーションソリューション

1月

特徴

説明

リリース日

リージョン

範囲

リファレンス

DataWorks で購入したリソースの管理をサポート

次の特徴がサポートされています。

リリースされていないすべてのリソースを DataWorks に表示できます。 これにより、仕様のアップグレードやダウングレード、返金の申請、リソースの更新などの操作を効率的に実行できます。

2023.1.11

すべてのリージョン

すべての DataWorks ユーザー

課金の概要

Data Governance Center での複数タスクの一括グレースフルアンデプロイをサポート

次の特徴がサポートされています。

  • シナリオ固有のガバナンスプランが提供されます。 このプランは、複数の無効なタスクまたは繰り返されるタスクを一度に安全な方法でアンデプロイする必要があるシナリオに適しています。

  • [グレースフルなアンデプロイ] ガバナンスプランが提供されます。 ガバナンス担当者は、ガバナンスオブジェクトを選択することで、影響を受けるユーザーとアセットを確認できます。

  • タスクを整然かつスムーズにアンデプロイするために、段階的なアンデプロイプランが提供されます。 アンデプロイプランには、スケジューリングの一時停止、スケジューリングの遅延、アンデプロイのフェーズ、およびフェーズステータスの通知が含まれます。

2023.1.9

すべてのリージョン

すべての DataWorks ユーザー

グレースフルなアンデプロイ

基本モードのワークスペースの DataStudio でのコードレビューをサポート

基本モードのワークスペースの DataStudio でコードレビュー機能がサポートされています。 強制コードレビュー機能が有効になっている場合、ノードのコードがコードレビューに合格した後にのみ、ノードのコードが本番環境で有効になります。

2023.1.5

すべてのリージョン

すべての DataWorks ユーザー

コードレビュー

2022

11月

機能

説明

リリース日

リージョン

範囲

リファレンス

DataService Studio の開発環境および本番環境におけるデータソース指向の API カプセル化のサポート

標準モードのワークスペースで次の機能がサポートされます:

  • 選択したデータソースの環境タイプに基づいて、API の高度なパラメーターを構成できます。環境タイプは、開発または本番にすることができます。

  • API は、開発環境のデータベース内のデータに基づいてテストでき、本番環境のデータベース内のデータに基づいて公開できます。

2022.11.29

すべてのリージョン

すべての DataWorks ユーザー

コードレス UI を使用して API を作成する

Data Map での Hive テーブルの権限リクエストのサポート

[Data Map] の EMR Hive テーブルの詳細ページに [権限のリクエスト] ボタンが追加されました。このボタンをクリックして、Security Center でテーブルの権限をリクエストできます。

2022.11.29

すべてのリージョン

すべての DataWorks ユーザー

Data Map でプレビューできる Hive テーブルのタイプ

Data Map でのデータアルバムのサポート

[Data Map][データアルバム] ページが追加されました。次の機能が提供されます:

  • データテーブルは、ビジネスカテゴリ、データ感度レベル、およびデータカテゴリに基づいてデータアルバムで整理および管理できます。

  • 頻繁に使用されるテーブル、チームテーブル、人気のあるテーブルなどの特定のテーブルをデータアルバムに追加できます。これにより、データテーブルを効率的に検索できます。

2022.11.16

すべてのリージョン

すべての DataWorks ユーザー

ビジネス視点からのテーブル管理: データアルバム

アップグレードされた DataAnalysis サービスでのまったく新しい SQL クエリ体験

アップグレードされた DataAnalysis サービスでは、次の機能がサポートされています:

  • アカウント内でデータ取得に一般的に使用されるすべての SQL ファイルとすべてのデータテーブルセットを集中管理できます。

  • 必要な権限を持つユーザーは、SQL 文を実行してビジネスデータを抽出できます。

  • SQL クエリ結果の二次処理と、処理された結果のチャートでの表示がサポートされています。

2022.11.15

すべてのリージョン

すべての DataWorks ユーザー

SQL クエリと分析

DataService Studio のスクリプトモードで高度な SQL 構文を使用して作成された API のリクエストおよびレスポンスパラメーターの解析のサポート

DataService Studio では次の機能がサポートされています:

  • スクリプトモードで高度な SQL 構文を使用して API を作成した後、API の構成タブの右側のナビゲーションウィンドウにある [リクエストパラメーター] タブと [レスポンスパラメーター] タブで [パラメーターの解析] をそれぞれクリックして、リクエストおよびレスポンスパラメーターを解析できます。

  • パラメーターを手動で指定することによって生成されるワークロードが削減されます。

2022.11.10

すべてのリージョン

すべての DataWorks ユーザー

なし

10月

機能

説明

リリース日

リージョン

範囲

リファレンス

データモデリングにおける EMR Hive コンピュートエンジンのサポート

[データモデリング][ディメンショナルモデリング] モジュールで次の機能がサポートされています。これらの機能により、データモデリングは MaxCompute と同じモデリング機能を提供できます。

  • モデルを EMR Hive に公開し、ETL コードフレームワークを生成できます。

  • 既存の EMR Hive テーブルでリバースモデリングを実行できます。

2022.11.25

すべてのリージョン

すべての DataWorks ユーザー

データモデリングにおけるモデルのバージョン管理のサポート

[データモデリング][ディメンショナルモデリング] モジュールで次の機能がサポートされています。

  • モデルのバージョン管理がサポートされています。送信されたモデルのみを公開できます。

  • モデルのバージョン比較とロールバックがサポートされています。

2022.11.25

すべてのリージョン

すべての DataWorks ユーザー

テーブルをコンピュートエンジンにマテリアライズする

DataService Studio の API 詳細ページにドメイン名に基づいて生成された API 呼び出しアドレスの表示

インターネットドメイン名、VPC ドメイン名、および独立ドメインに基づいて API 用に個別に生成された呼び出しアドレスを、API の詳細ページに表示できます。ビジネス要件に基づいて API を呼び出すアドレスを選択できます。

2022.10.21

すべてのリージョン

すべての DataWorks ユーザー

API の詳細を表示する

Data Map のリネージ機能のアップグレード

Data Map のリネージ機能がアップグレードされ、データリネージ分析におけるユーザーエクスペリエンスが向上しました。リネージ詳細タブでは、次の操作を実行できます:

  • テーブルの祖先テーブルと子孫テーブル、およびテーブルフィールドの祖先フィールドと子孫フィールドを表示します。

  • テーブルのデータソースと、テーブルデータが流れる宛先を表示します。

  • テーブルの必要なレベルの子孫テーブルの影響分析を実行します。

2022.10.21

すべてのリージョン

すべての DataWorks ユーザー

テーブルの詳細を表示する

データガバナンスセンターの R&D ディメンションにおける新しいチェック項目のサポート

データガバナンスセンターの R&D ディメンションに次のタイプのチェック項目が追加されました:

  • JOIN 条件の型の一貫性をチェックする

  • 特定のアセットの使用を禁止する

  • 同じ名前の UDF の使用をチェックする

  • 開発環境でのデータ書き込みの制限をチェックする

次の機能が提供されます:

  • チェック機能は管理できます。

    Data Governance Center では、[設定] タブで新しいチェック項目を有効化して設定し、[ナレッジ] タブでチェック項目の使用状況の詳細を確認できます。

  • DataStudio でタスクがコミットおよびデプロイされるときに、R&D ディメンションでのプロアクティブなデータガバナンスがサポートされます。

2022.10.20

すべてのリージョン

すべての DataWorks ユーザー

チェック項目を構成する

基本モードのワークスペースの DataStudio でのコードレビューのサポート

基本モードのワークスペースで強制コードレビュー機能が有効になっている場合、ノードのコードは、コードレビューに合格した後にのみ本番環境で有効になります。

2022.9.22

すべてのリージョン

すべての DataWorks ユーザー

コードレビュー

8月

機能

説明

リリース日

リージョン

範囲

リファレンス

オペレーションセンターにおけるワークフロー視点からのタスク管理

オペレーションセンターでは、ワークフローの観点からタスクのステータスを表示したり、タスクの再実行、凍結、終了などの操作を実行したりできます。

2022.8.22

すべてのリージョン

すべての DataWorks ユーザー

定期タスクインスタンスを表示する

DataService Studio での MaxCompute データソース指向のクエリアクセラレーション

DataService Studio でオンライン API を作成し、アクセラレーションソリューションを使用して MaxCompute データのクエリを高速化できます。MaxCompute からデータをエクスポートする必要はありません。これにより、クエリのパフォーマンスと効率が向上し、オンラインクエリの要件を満たします。次のアクセラレーションソリューションが提供されます:

  • Hologres 外部テーブルに基づくアクセラレーション

  • MaxCompute Query Acceleration (MCQA) 機能に基づくアクセラレーション

2022.8.17

中国 (上海) および中国 (深圳)

すべての DataWorks ユーザー

API ベースのデータクエリのアクセラレーションソリューション

DataService Studio での API 呼び出しリンクのインテリジェントな診断と分析

DataService Studio で API 呼び出しログを分析できます。ログ分析機能を使用して、単一の API 呼び出しリクエストのリンクを分析できます。API 呼び出しリクエストが失敗した場合、この機能を使用して問題を早期にトラブルシューティングし、診断結果と提案を取得できます。

2022.8.7

すべてのリージョン

DataWorks ユーザー

API 呼び出しログの表示と分析 (パブリックプレビュー)

Data Map でのプロジェクトおよびテーブルレベルでのきめ細かい権限管理

Data Map では、さまざまなポリシーを構成して、さまざまな粒度でメタデータの権限を管理できます。

  • 他の MaxCompute プロジェクトのメンバーが現在の MaxCompute プロジェクトのメタデータを表示できるかどうかを決定できます。

  • MaxCompute プロジェクトのメンバーではないユーザー、テーブルのオーナーではないユーザー、およびワークスペース管理者がテーブルのメタデータを表示できるかどうかを決定できます。

2022.8.5

すべてのリージョン

DataWorks ユーザー

付録: Data Map の権限管理の概要

Data Integration でコードレス UI を使用して Dameng データベースとの間でデータを同期するバッチ同期タスクの作成のサポート

コードレス UI を使用してバッチ同期タスクを作成し、Data Integration で Dameng データベースとの間でデータを同期できます。コードレス UI はコードエディタよりも便利です。

2022.8.2

すべてのリージョン

DataWorks ユーザー

コードレス UI でタスクを構成する

7月

機能

説明

リリース日

リージョン

範囲

リファレンス

データモデリングにおけるディメンションモデリングのサポート

データモデリングでは次の機能がサポートされています:

  • テンプレート設計中に、既存の Hologres テーブルまたはビューのフィールドとパーティション情報をモデルのフィールドとして参照できます。

  • テンプレート設計中に、表示名または説明が空のフィールドに対して、ワンクリックでの塗りつぶしを実行できます。

    ほとんどの場合、物理テーブルにはフィールドの説明があります。フィールドに表示名が指定されていない場合、この機能を使用してフィールドの表示名をすばやく指定することで、モデリング効率を向上させることができます。

  • テンプレート開発プロセスでノードを作成したり、既存のノードを関連付けたりして、モデルの ETL 開発効率を向上させることができます。

2022.7.29

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)、シンガポール、中国東部 2 金融、中国南部 1 金融、中国北部 2 Ali Gov、ドイツ (フランクフルト)、および米国 (シリコンバレー)

すべての DataWorks ユーザー

データモデリングにおける関連フィールド情報の表示のサポート

関連フィールドの情報を表示するには、次の操作を実行できます: 派生メトリックまたはアトミックメトリックの構成タブに移動します。右側のナビゲーションウィンドウで [テーブルの関連付け] をクリックして、現在のメトリックに関連付けられているフィールドの名前を表示します。関連付けられたフィールドが属するテーブルの詳細ページに移動して、関連付けを管理することもできます。

2022.7.29

すべての DataWorks ユーザー

派生メトリック

データモデリングにおけるテーブルおよび派生メトリックの命名規則チェッカーの構成のサポート

データ層のチェッカーを構成して、命名規則を定義し、データ層のテーブルと派生メトリックの命名形式を統一できます。テーブルと派生メトリックを設計する際に、チェッカーはエンティティ名を制約および検証して、開発プロセス全体で命名のコンプライアンスを向上させることができます。

チェッカーで定義されたルールの構成:

  • 強度タイプ: データ層のチェッカーで定義されたルールの [強度タイプ] パラメーターを [強いルール] に設定した場合、データ層でテーブルまたは派生メトリックを作成するときにチェッカーを選択してテーブルまたは派生メトリックの名前を生成し、強制チェックを実行できます。[強度タイプ] パラメーターを [弱いルール] に設定した場合、データ層でテーブルまたは派生メトリックを作成するときにチェッカーを選択してテーブルまたは派生メトリックの名前を生成できます。

  • ルール定義: 命名規則。さまざまな要因に基づいて、名前の構成順序と構成を構成できます。

2022.7.29

すべての DataWorks ユーザー

データ層でチェッカーを構成して使用する

DataAnalysis でさまざまなコンピュートエンジンタイプのタスクで使用される専用リソースグループの構成のサポート

Alibaba Cloud アカウントを使用して、DataAnalysis の [システム管理] ページでさまざまなコンピュートエンジンタイプのタスクで使用される専用リソースグループを構成できます。特定の専用リソースグループで SQL クエリを実行できます。

2022.7.29

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、およびドイツ (フランクフルト)

すべての DataWorks ユーザー

システム管理

PostgreSQL データベースのデータ同期のサポート

PostgreSQL データベースのデータ同期がサポートされています。SSL 認証を実行する際に、.crt ファイルと .key ファイルに基づく 2 要素認証がサポートされています。

2022.7.26

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)、日本 (東京)、シンガポール、マレーシア (クアラルンプール)、インドネシア (ジャカルタ)、ドイツ (フランクフルト)、英国 (ロンドン)、米国 (シリコンバレー)、米国 (バージニア)、および UAE (ドバイ)

すべての DataWorks ユーザー

Data Integration

EMR DataLake クラスターのサポート

EMR DataLake クラスターは、DataWorks のコンピュートエンジンとして使用できます。EMR DataLake コンピュートエンジンに基づいて動作する次のフルライフサイクル機能が実装できます: データ同期、データモデリング、データ開発とスケジューリング、データ品質監視、データマップ、データセキュリティ、データ分析 (関連タスクは専用リソースグループで実行する必要があります)、およびデータサービス。

2022.7.8

中国 (成都)、中国 (張家口)、中国 (深圳)、中国 (北京)、中国 (上海)、中国 (杭州)、中国 (香港)、日本 (東京)、ドイツ (フランクフルト)、米国 (バージニア)、米国 (シリコンバレー)、インドネシア (ジャカルタ)、英国 (ロンドン)、シンガポール、マレーシア (クアラルンプール)、および UAE (ドバイ)

すべての DataWorks ユーザー

DataWorks での EMR ノード開発の注意事項

DataStudio のインテリジェントコードエディタを使用した、視覚的な方法でのフィールド挿入とテーブルの権限検証のサポート

  • コード内のテーブルフィールドのクエリは、インテリジェントコードエディタによって自動的に識別できます。テーブル名の上にポインターを移動し、クエリするフィールドを選択して選択を確定すると、フィールド名がコードに自動的に挿入されます。

  • テーブルの権限は、インテリジェントコードエディタによって検証できます。プロンプトに従ってテーブルの権限をリクエストできます。

2022.7.2

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、および中国 (香港)

すべての DataWorks ユーザー

DataStudio

6月

機能

説明

リリース日

リージョン

範囲

リファレンス

データガバナンスセンターのサポート

データガバナンスセンターが利用可能になり、次の機能を提供します:

  • ストレージ、コンピューティング、開発、品質、セキュリティの各ディメンションから定量的な評価モデルに基づいてガバナンス結果の健全性スコアを計算し、さまざまなタイプのデータガバナンスの問題を特定して防止します。

  • 単一タスクのコストを見積もり、タスクによって消費されるリソースの詳細とリソース消費の全体的な傾向を表示できます。これにより、リソース使用量を最適化し、さまざまなタイプのリソースのコストを削減できます。

説明
  • データガバナンスセンターは 2022 年 7 月 5 日から利用可能で、1 か月間の試用期間が提供されます。

  • 2022 年 8 月 5 日から、データガバナンスセンターのすべての機能が DataWorks Enterprise Edition で利用可能になります。

2022.6.27

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (深圳)、中国 (成都)、シンガポール、および米国 (シリコンバレー)

すべての DataWorks ユーザー

データガバナンスセンターの概要

データガバナンスセンターでのタスクのパノラマビューのサポート

[タスク 360] ページでタスクのパノラマビューが提供されます。このページでは、タスクに関する次の情報を表示できます: タスクで特定されたガバナンスの問題、タスクの操作レコード、タスクの影響を受けるベースライン、およびタスクの実行情報。この情報は、タスクに対するデータガバナンス操作の実行に役立ちます。

2022.6.24

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (深圳)、中国 (成都)、シンガポール、および米国 (シリコンバレー)

すべての DataWorks ユーザー

タスクの全体像を把握する

データモデリングにおけるビューの検索と作成のサポート

  • 既存のビューフィールドとパーティション情報を、モデル設計中にモデルのフィールドとして参照できます。

  • モデルが設計された後、モデルをビューにマテリアライズできます。

2022.6.22

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)、シンガポール、米国 (シリコンバレー)、ドイツ (フランクフルト)、中国東部 2 金融、中国南部 1 金融、および中国北部 2 Ali Gov 1

すべての DataWorks ユーザー

テーブルをコンピュートエンジンにマテリアライズする

データモデリングにおけるテーブル名キーワードに基づくモデル生成のサポート

リバースモデリング機能を使用して、テーブル名キーワードのあいまい一致に基づいて論理モデルを生成できます。

2022.6.19

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)、シンガポール、米国 (シリコンバレー)、ドイツ (フランクフルト)、中国東部 2 金融、中国南部 1 金融、および中国北部 2 Ali Gov 1

すべての DataWorks ユーザー

物理テーブルでリバースモデリングを実行する

承認センターでのデータ同期タスクで実行される操作の管理のサポート

承認センターでデータ同期タスクのリクエスト処理ポリシーを構成して、データ転送中のデータのセキュリティを確保できます。ソースと宛先の組み合わせを使用して、操作リクエストを処理する必要があるデータ同期タスクを指定できます。たとえば、データ同期タスクが保存されると、関連するリクエスト処理プロシージャがトリガーされます。これにより、データ同期プロセスを柔軟に管理できます。

2022.6.15

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)、シンガポール、インドネシア (ジャカルタ)、マレーシア (クアラルンプール)、米国 (シリコンバレー)、米国 (バージニア)、およびドイツ (フランクフルト)

すべての DataWorks ユーザー

データ同期タスクのリクエスト処理ポリシー

データセキュリティガードにおける機密データのリネージグラフのサポート

機密データリネージグラフ機能がサポートされています。この機能は、次のサブ機能をサポートしています:

  • データの生成情報に基づいて、データ内の機密フィールド間のリネージを解析できます。識別結果は、同じ機密フィールドタイプを持つ機密フィールド間のリネージに基づいて伝播できます。これにより、機密データ識別の効率が大幅に向上します。

  • 機密フィールド間のリネージに基づいて機密データのリネージグラフを描画できます。リネージグラフは、機密データのソースと宛先を理解するのに役立ちます。

説明

この機能は DataWorks Enterprise Edition でのみ利用可能です。

2022.6.14

中国 (杭州) および中国 (上海)

すべての DataWorks ユーザー

機密データリネージの表示 (パブリックプレビュー)

データセキュリティガードにおけるフィールド間の異常なリネージの分析のサポート

異常なリネージ分析機能がサポートされています。この機能は、次の機能を提供します:

  • フィールドのリネージに基づいて、機密フィールド間の異常な関連付けを分析します。これにより、ユーザーは文字を連結または分解することで、機密データ識別と機密データ使用監査をバイパスできなくなります。

  • クエリされたフィールドに関連付けられているが、クエリされたフィールドとは異なる機密フィールドタイプを持つフィールドを特定するのに役立ちます。

2022.6.14

中国 (杭州) および中国 (上海)

すべての DataWorks ユーザー

機密データリネージの表示 (パブリックプレビュー)

5月

機能

説明

リリース日

リージョン

範囲

リファレンス

リスク識別ルール管理機能の新バージョン

リスク識別ルール管理機能の新バージョンがリリースされました。新バージョンの機能は、組み込みのリスク識別シナリオを提供します。データのカテゴリや感度レベル、操作メソッド、ユーザー権限など、さまざまなディメンションからのリスク識別がサポートされています。誤検知アラートを防ぐために、アラートイベントの集約度に基づくアラート判定がサポートされています。高、中、低レベルのリスクに対するきめ細かい管理がサポートされています。これにより、企業内のさまざまなデータリスクを包括的に特定できます。

説明
  • リスク識別ルール管理機能は、DataWorks Professional Edition 以上のエディションでのみ使用できます。

  • リスク識別ルール管理機能の旧バージョンは、2022 年 6 月 30 日以降はサポートされなくなります。旧バージョンがオフラインになると、システムは旧バージョンを使用して作成されたすべての識別ルールと識別されたリスクデータをクリアします。必要な識別ルールと識別されたリスクデータをできるだけ早くエクスポートすることをお勧めします。

  • 新バージョンを使用するには、新バージョンに切り替えて、ビジネス要件に基づいて識別ルールを作成する必要があります。

2022.5.16

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、および中国 (香港)

すべての DataWorks ユーザー

リスク識別ルール管理 (新バージョン)

4月

機能

説明

リリース日

リージョン

範囲

リファレンス

DataStudio ページの機能の最適化と DataStudio ページのノードのステータスの表示パターンの最適化

  • ノードが作成された後、最近使用したノードタイプを表示できます。使用したいノードタイプを直接選択できます。

  • [お気に入り] 機能が提供されます。頻繁に使用するノードをお気に入りに追加できます。これにより、ノードを効率的に変更したり、他のユーザーと共同でノードを変更したりできます。

  • [定期ワークフロー] ペインのノードのステータスの表示パターンが最適化されました。コミットまたはデプロイされていないノードの左側に [コミット] アイコンと [デプロイ] アイコンが表示されます。これにより、ノードをすばやくコミットまたはデプロイできます。

2022.4.7

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、および中国 (香港)

すべての DataWorks ユーザー

DataStudio ページの機能

Data Quality でのルールリスト機能と複数の監視ルールの管理のサポート

ルールリスト機能がサポートされ、次の機能が提供されます:

  • 現在のワークスペースで作成された監視ルールをリストに表示できます。複数の監視ルールを同時に有効化、無効化、サブスクライブしたり、複数の監視ルールを同時に定期タスクに関連付けたりできます。ビジネス要件に基づいて監視ルールの強度を変更することもできます。

  • ルールテンプレートに基づいて、複数のテーブルに対して同時に監視ルールを作成でき、複数の監視ルールを集中管理して効率的に管理し、企業のさまざまなタイプのデータ品質問題を解決できます。

2022.4.11

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、および中国 (香港)

すべての DataWorks ユーザー

Data Quality で監視ルールを構成する

オペレーションセンターのインテリジェントベースライン機能における、ベースラインのより柔軟なアラート設定のサポート

インテリジェントベースライン機能は、次の点で最適化されています:

  • ベースライン、ベースラインインスタンス、およびイベントが [スマートベースライン] ページに表示されます。[スマートベースライン] ページの関連タブでオブジェクトを管理できます。

  • 各ベースラインに、ショートメッセージ、メール、電話番号などのアラート通知方法を構成できます。また、アラートルールを勤怠表に関連付けることもできます。これにより、オーナーの頻繁な変更による複雑な操作を防ぐことができます。

2022.4.26

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、および中国 (香港)

すべての DataWorks ユーザー

インテリジェントベースラインの概要

3月

機能

説明

リリース日

リージョン

範囲

リファレンス

[デプロイ] ページでのオブジェクトのクロスワークスペースデプロイメントのサポートとデプロイ操作の管理の最適化

ワークスペース内のタスク、リソース、関数などのオブジェクトを別のワークスペースにデプロイできます。

2022.3.2

すべてのリージョン

金融セクターや公共サービスセクターのユーザーなど、デプロイ操作に対する強力な制御を必要とするユーザー

クロスワークスペースデプロイメント

DataAnalysis と ActionTrail の統合、および ActionTrail による DataAnalysis の操作レコードの監視

DataAnalysis は ActionTrail と統合されており、次のタイプの操作レコードを ActionTrail で監視できます:

  • MaxCompute SQL 文を実行するための操作レコード

  • SQL 実行結果をダウンロードするための操作レコード

  • ワークブックをダウンロードするための操作レコード

2022.3.20

すべてのリージョン

すべての DataWorks ユーザー

データガバナンスセンターにおけるチェック項目とガバナンス項目のランキング機能の最適化

ランキング機能は、次の点で最適化されています:

  • ガバナンス項目はロールでフィルターできます。

  • [ガバナンス項目][チェック項目] は、さまざまなディメンションからソートできます。

  • ワークスペース内のすべてのメンバーのチェック項目とガバナンス項目を表示できます。

  • ガバナンス項目はリストに表示されます。ガバナンス項目の詳細を表示できます。

  • MaxCompute リソースのリソース使用量と使用状況の詳細に関する履歴トレンドチャートが表示されます。

2022.3.21

すべてのリージョン

データガバナンスセンターの招待プレビューに参加しているユーザー

データガバナンスの結果を表示する

Data Integration における同期タスクの構成の最適化

データ統合専用リソースグループで [MaxCompute へのデータ同期のためのリアルタイム同期タスク] または [Hologres へのデータ同期のためのリアルタイム同期タスク] を実行すると、1,000 を超えるテーブルを同期できます。これにより、データ同期の効率が向上します。

2022.3.25

すべてのリージョン

Software as a Service (SaaS) プラットフォームのユーザーや金融セクターのユーザーなど、大量のデータを同期する必要があるユーザー

PostgreSQL 環境を準備する

2021

12月

機能

説明

リリース日

リージョン

リファレンス

Data Quality でのルールテンプレートに基づく複数テーブルの同時モニタリングルールの構成をサポート

ルールテンプレートを選択して、複数のテーブルのモニタリングルールを同時に構成できます。これにより、構成が簡素化されます。

  • テーブルレベルのルールテンプレートを選択して、複数のテーブルのモニタリングルールを同時に構成できます。

  • フィールドレベルのルールテンプレートを選択して、複数のフィールドのモニタリングルールを同時に構成できます。

2021.12.14

すべてのリージョン

テンプレートに基づいて複数テーブルのモニタリングルールを構成する

データガバナンスセンターでのリソース使用量分析機能のサポート

リソース使用量分析機能は、DataWorks データガバナンスセンターによって提供されます。この機能を使用すると、[MaxCompute ストレージリソース消費][MaxCompute 計算リソース消費][DataWorks タスクスケジューリングのリソース消費]、および [DataWorks バッチ同期のリソース消費] のディメンションで、全体的なリソース消費、リソース消費の変更、およびリソース消費の詳細を表示できます。

2021.12.9

すべてのリージョン

リソースタイプの観点からのデータピボット

11月

機能

説明

リリース日

リージョン

リファレンス

DataStudio でのリソースグループオーケストレーション機能のサポート

リソースグループのオーケストレーション機能がサポートされています。この機能を使用すると、ワークフロー内の複数のノードのスケジューリング用のリソースグループを同時に変更できます。ワークスペースにスケジューリング用の複数のリソースグループが存在する場合、ビジネス要件に基づいてワークスペース内のノードのスケジューリング用のリソースグループを変更できます。これにより、合理的なリソース使用が促進されます。

2021.11.30

すべてのリージョン

ノードのスケジューリング用リソースグループの変更

DataStudio でのバッチ操作機能のサポート

複数の DataWorks オブジェクトに対して同時に操作を実行できます。DataWorks では、複数のノード、リソース、または関数のオーナーなどの構成を同時に変更できます。変更後、ノード、リソース、または関数を本番環境にコミットしてデプロイし、変更を有効にすることができます。

2021.11.11

すべてのリージョン

複数の DataWorks オブジェクトに対して同時に操作を実行する

10月

機能

説明

リリース日

リージョン

リファレンス

データモデリングでのリバースモデリングと命名辞書機能のサポート

  • 命名辞書機能がサポートされています。命名辞書は、ビジネス用語、物理テーブル、およびフィールドの語根と形態素、および語根と形態素の標準化された翻訳を管理するために使用されます。

  • リバースモデリング機能がサポートされています。この機能は、他のモデリングツールを使用して生成されたモデルを DataWorks ディメンショナルモデリングに適用するために使用されます。

2021.10.30

これらの機能は、中国 (北京)、中国 (上海)、中国 (杭州)、中国 (深圳)、中国 (張家口)、中国 (成都)、シンガポール、米国 (シリコンバレー)、ドイツ (フランクフルト)、中国 (香港)、China East 2 Finance、および China South 1 Finance の各リージョンでパブリックプレビュー中です。

DataStudio でのコード検索機能のサポート

コード検索機能がサポートされています。この機能を使用すると、キーワードでノードのコード内のコードスニペットをクエリできます。検索結果には、各コードスニペットの詳細と、コードにコードスニペットが含まれるノードが表示されます。この機能を使用して、テーブルの変更を引き起こしたノードを追跡できます。

2021.10.27

すべてのリージョン

コード検索

9月

機能

説明

リリース日

リージョン

リファレンス

Data Map での DataService Studio API の表示のサポート

ウィザード API、スクリプト API、登録 API などの DataService Studio API アセットを Data Map に表示できます。グローバルな視点から、またはビジネスシナリオに基づいて API を検索および管理できます。Data Map では、API のグローバル検索、人気のある API の統計の表示、API の詳細ページでの API に関する情報の表示、各データソースタイプに属する API の分布の表示など、API に対する特定の操作を実行できます。

2021.09.30

すべてのリージョン

最新バージョンのデータガバナンスセンターのリリース

データストレージ、タスクコンピューティング、コード開発、Data Quality、およびセキュリティのディメンションで処理する必要がある問題は、データガバナンスセンターによってグローバル、ワークスペース、および個人の視点から検出できます。データガバナンスセンターは、データガバナンスの有効性を評価するためのヘルススコアを提供し、ガバナンスレポートとガバナンス問題のランキングを提供することでガバナンス結果を視覚化します。これにより、効率的な方法で問題をトラブルシューティングし、ガバナンス目標を達成できます。

2021.09.12

最新バージョンのデータガバナンスセンターは、中国 (上海)、中国 (杭州)、中国 (北京)、および中国 (深圳) リージョンでパブリックプレビュー中です。

データガバナンスセンターの概要

8月

機能

説明

リリース日

リージョン

リファレンス

中国 (杭州) および中国 (上海) リージョンにおける DataService Studio の排他的リソースグループ

DataService Studio の排他的リソースグループは、中国 (杭州) および中国 (上海) リージョンで利用できます。DataService Studio で API を呼び出す際に高いクエリ/秒 (QPS) とサービスレベルアグリーメント (SLA) の保証が必要な場合は、DataService Studio の排他的リソースグループを使用して API 呼び出しの成功を保証できます。DataService Studio の排他的リソースグループは、高度に同時実行される頻繁な API 呼び出しの要件を満たし、応答が可能な限り早く返されるようにするのに役立ちます。

2021.08.06

中国 (杭州) および中国 (上海)

DataService Studio の排他的リソースグループの課金

DataWorks Migration Assistant の商用リリース

Migration Assistant を使用して、さまざまな DataWorks エディション、Alibaba Cloud アカウント、リージョン、およびワークスペース間でデータ開発オブジェクトを移行できます。定期タスク、手動タスク、リソース、関数、データソース、テーブルメタデータ、アドホッククエリ、SQL スクリプトテンプレートなど、ワークスペース内のデータオブジェクトをエクスポートできます。また、完全エクスポートタスク、増分エクスポートタスク、またはカスタムエクスポートタスクを作成して、ビジネス要件に基づいて DataWorks のデータオブジェクトをエクスportすることもできます。

2021.08.01

すべてのリージョン

概要

7月

機能

説明

リリース日

リージョン

リファレンス

データガバナンスセンターでの承認センターのリリース

DataWorks 承認センター機能がリリースされました。この機能を使用して、データに対する権限を管理し、高リスクの操作を管理できます。また、この機能を使用してリクエストの範囲を指定し、リクエスト処理手順をカスタマイズして、さまざまなコンプライアンスシナリオにおける企業のリクエスト処理要件を満たすこともできます。

2021.07.16

すべてのリージョン

承認センターの概要

EMR ゲートウェイノードへのタスク発行のサポート

[詳細設定] タブのパラメーターを構成して、EMR ゲートウェイノードにタスクを発行し、負荷を分散できます。将来的には、ワークスペースレベルのタスクをノードに発行できます。

2021.07

すべてのリージョン

EMR Hive ノードを作成する

6月

機能

説明

リリース日

リージョン

リファレンス

EMR Spark Streaming ノードの開発と O&M

EMR Spark Streaming および EMR Streaming SQL ノードは DataWorks でサポートされています。

EMR Spark Streaming または EMR Streaming SQL ノードを開発し、ノードをテストしてから、ノードを本番環境にコミットできます。ノードの実行に失敗した場合は、ノードを再実行できます。また、ノードのステータスと詳細の表示、ノードの開始、終了、またはアンデプロイ、ノードの監視、ノードでエラーが発生した場合の通知の送信などの操作も実行できます。

2021.06

すべてのリージョン

EMR Spark Streaming ノードを作成する

EMR データ開発タスクの DataWorks への移行

ワークフロー (ノードとスケジューリング設定)、手動で実行されるジョブ、リソース、およびデータソースは、DataWorks の Migration Assistant を使用して EMR クラスターから DataWorks ワークスペースに移行できます。DataWorks コンソールの Migration Assistant ページに移動して、移行の進行状況、結果、およびレポートを表示できます。

2021.06

すべてのリージョン

EMR プロジェクトを DataWorks に移行する

オペレーションセンターでのリソース O&M 機能のサポート

リソース O&M 機能はオペレーションセンターでサポートされています。この機能は、ノードの実行に使用されるリソースグループの使用状況を監視するのに役立ちます。

2021.06.09

すべてのリージョン

リソース O&M

MaxCompute データソースベースの API カプセル化

MaxCompute テーブルにアクセスし、DataService Studio で API をカプセル化するために使用できます。この機能はカナリアリリースです。このような API は、MaxCompute の MCQA 機能に基づいてデータをクエリします。これにより、迅速かつ効率的な API 呼び出しを実現できます。DataService Studio の排他的リソースグループでのみ MaxCompute タスクを実行できます。

2021.06

すべてのリージョン

なし

DataWorks でのアラート連絡先の構成

RAM ユーザーまたは RAM ロールは、DataWorks コンソールの [アラート連絡先] ページでアラート連絡先として追加できます。タスクの実行中にエラーが発生した場合、DataWorks は指定したアラート連絡先にアラート通知を送信します。これにより、例外を可能な限り早く処理できます。

2021.06

すべてのリージョン

アラート連絡先の構成と表示

5月

機能

説明

リリース日

リージョン

リファレンス

リアルタイムデータ同期から AnalyticDB for MySQL V3.0

DataWorks でリアルタイム同期タスクを作成して、MySQL、OceanBase、または PolarDB データベースから AnalyticDB for MySQL データソースにデータを同期できます。リアルタイム同期タスクは、一度にデータベースから完全データを同期し、その後、データベースから増分データをリアルタイムで AnalyticDB for MySQL V3.0 データソースに同期します。さらに、ソースに追加した列は、リアルタイム同期中に自動的に宛先に追加されます。

2021.05.25

すべてのリージョン

リソースの計画と構成

Open Message のパブリックプレビュー

Open Message サービスは DataWorks でサポートされています。DataWorks Open Message でメッセージサブスクリプション機能を有効にできます。Open Message サービスはパブリックレビュー中です。DataWorks Enterprise Edition のユーザーのみがパブリックプレビューに参加できます。DataWorks サービスが Enterprise Edition の場合、Open Message サービスを試用ベースで使用でき、パブリックプレビュー中は追加料金は請求されません。Open Message を使用して、DataWorks のメタデータとタスク変更イベントを取得できます。これにより、DataWorks をシステムと深く統合できます。

2021.05.21

中国 (北京)、中国 (杭州)、中国 (深圳)、および中国 (上海)

OpenEvent の概要

毎年の特定の日または月の最終日の指定した時点で実行するようにタスクをスケジューリングするサポート

タスクは、毎年の特定の日または月の最終日の指定した時点で実行するようにスケジュールできます。これにより、毎年、四半期、または月の最終日の指定した時点で実行するようにタスクをスケジュールできます。DataWorks では、[分][時間][日][週][月]、または [年] ごとにタスクをスケジュールできます。

2021.05.19

すべてのリージョン

時間プロパティを構成する

ClickHouse データソースのサポート

ClickHouse データソースは DataWorks でサポートされています。ClickHouse データソースに関連するデータ同期、データ開発、タスクスケジューリング、タスク O&M などの ETL 操作が許可され、ETL 操作の管理機能が提供されます。

  • DataWorks では、EMR インスタンスモードまたは JDBC 接続文字列モードで ClickHouse クラスターをワークスペースに関連付けることができます。JDBC 接続文字列モードで ClickHouse データソースを追加することもできます。

  • DataWorks Data Integration では、データ同期タスクを作成して ClickHouse からデータを読み取ったり、ClickHouse にデータを書き込んだりできます。

  • DataWorks では、ClickHouse SQL ノードを作成できます。ClickHouse SQL ノードを使用すると、分散 SQL クエリエンジンを使用して構造化データを処理できます。これにより、ジョブの実行効率が向上します。

2021.05.15

すべてのリージョン

4月

機能

説明

リリース日

リージョン

リファレンス

リアルタイムデータ同期から AnalyticDB for MySQL V3.0

Data Integration でリアルタイム同期タスクを作成して、複数のテーブルから AnalyticDB for MySQL V3.0 データソースにデータをリアルtimeで同期できます。DDL 文を実行してソーステーブルに追加した列は、リアルタイム同期中に自動的に宛先テーブルに追加されます。

2021.4.20

すべてのリージョン

AnalyticDB for MySQL V3.0 にデータを同期するためのリアルタイム同期ソリューションを作成する

DataStudio での FTP Check ノードのサポート

DataStudio で FTP Check ノードを作成して、FTP に基づいて特定のファイルが存在するかどうかを定期的に検出できます。FTP Check ノードがファイルの存在を検出すると、スケジューリングシステムは FTP Check ノードの子孫ノードを実行します。それ以外の場合、FTP Check ノードは構成された検出間隔に基づいてファイルを検出します。FTP Check ノードは、検出を停止する条件が満たされるまでリトライを停止します。ほとんどの場合、FTP Check ノードは DataWorks スケジューリングシステムと外部スケジューリングシステム間の通信に使用されます。

2021.4.15

中国 (北京)、中国 (上海)、中国 (杭州)、中国 (深圳)、中国 (張家口)、中国 (成都)、およびシンガポール

FTP Check ノードを作成する

3月

機能

説明

リリース日

リージョン

リファレンス

DataWorks Enterprise Edition のワークスペースでのカスタムロールのサポート

カスタムロールは DataWorks Enterprise Edition でサポートされています。ビジネス要件に基づいてロールに権限を付与できます。

2021.3.22

すべてのリージョン

ワークスペースレベルのサービスの権限を管理する

Data Integration での Kerberos 認証

Kerberos 認証は Data Integration でサポートされています。Hive や Kafka などのデータソースの身分認証を実行する場合は、データソースを追加するときに Kerberos 認証の構成に必要なファイルをアップロードします。これにより、データソースに安全にアクセスできるようになります。

2021.3.16

すべてのリージョン

Kerberos 認証を構成する

最新バージョンのセキュリティセンター

最新バージョンのセキュリティセンターがリリースされました。セキュリティセンターを使用して、データと個人のプライバシーを効率的な方法で保護できるセキュリティシステムを構築できます。セキュリティセンターは、監査などの高リスクシナリオにおけるさまざまなセキュリティ要件を満たすことができます。追加の構成を行わなくてもセキュリティセンターを使用できます。

2021.03.13

すべてのリージョン

概要

オペレーションセンターでのノード集約、先祖ノード分析、子孫ノード分析機能のサポート

ノード集約機能がサポートされています。この機能を使用すると、ワークスペース、オーナー、優先度などのさまざまなディメンションから有向非循環グラフ (DAG) 内のノードを集約できます。これにより、指定したディメンションからのノードの総数を表示できます。先祖ノード分析および子孫ノード分析機能もサポートされています。これらの機能を使用すると、特定のノードの先祖ノードと子孫ノードを分析できます。これにより、ノードの実行をブロックしている先祖ノードをすばやく見つけ、分析結果に基づいてノードの子孫ノードの数を表示し、すべてのノードの実行ステータスを理解できます。

2021.03.10

中国 (深圳)

定期タスクの表示と管理

2月

機能

説明

リリース日

リージョン

リファレンス

データ検出機能を使用した一度に複数のメタデータクローラーの作成

[Data Map][データ検出] 機能を使用して、一度に複数のメタデータクローラーを作成できます。これにより、テーブルスキーマとテーブル間の関連付けをすばやく表示できます。

2021.02.17

すべてのリージョン

EMR データソースからメタデータを収集する

Migration Assistant を使用した Airflow からのタスク移行

Airflow のタスクは Migration Assistant を使用して DataWorks に移行できます。

2021.02.16

すべてのリージョン

オープンソースエンジンからタスクをエクスポートする

DataService Studio での API 統計表示のサポート

API 統計は、DataService Studio の [統計ダッシュボード] および [統計詳細] ページで表示できます。DataService Studio の [統計ダッシュボード] ページには、API 統計を示すさまざまなチャートとテーブルが用意されています。たとえば、ワークスペース内の API の総数と API 呼び出しの総数を表示できます。これにより、グローバルな視点から API 呼び出しに関する情報を取得できます。DataService Studio の [統計詳細] ページでは、モニタリングチャートを表示して、API ゲートウェイのステータスコードや DataService Studio のエラーコードなど、特定の API に関する情報を取得できます。

2021.02.16

中国 (北京)

Open Platform

[Open Platform] サービスは DataWorks で利用できます。このサービスを使用すると、API のメータリングレポートと指定した日付の呼び出し詳細を表示できます。

2021.02.13

すべてのリージョン

DataWorks Open Platform

1月

機能

説明

リリース日

リージョン

リファレンス

Data Integration での RestAPI データソースのサポート

RestAPI データソースは Data Integration でサポートされています。このようなデータソースは、RESTful API 操作を使用してデータを提供または受信します。Data Integration は、これらのデータソースのデータのバッチ同期をサポートします。

2021.1.4

すべてのリージョン

RestAPI Reader

2020

12月

機能

説明

リリース日

リージョン

リファレンス

Elasticsearch への完全および増分データ同期

データベース内のすべてのテーブルまたは特定のテーブルの完全データと増分データを Elasticsearch に同期できます。

2020.12.30

すべてのリージョン

MySQL データベースから Elasticsearch へのリアルタイム同期

9月

機能

説明

リリース日

リージョン

リファレンス

Data Integration でのリアルタイム同期

Data Integration でリアルタイム同期機能がサポートされるようになりました。 この機能を使用すると、ソースデータベースの単一テーブルまたはすべてのテーブルからのデータ変更を、リアルタイムでターゲットデータベースに同期できます。 これにより、ターゲットデータベースのデータは、ソースデータベースのデータとリアルタイムで一致します。 同期タスクを作成して、異なるデータソース間で完全データと増分データを同期できます。

2021.4.15

すべてのリージョン

7月

機能

説明

リリース日

リージョン

リファレンス

API 操作のパブリックプレビュー

複数のモジュールの API 操作が提供され、DataWorks を柔軟に使用できるようになります。 これらのモジュールには、テナント、メタデータ、DataStudio、オペレーションセンター、Data Quality、DataService Studio が含まれます。

説明

API 操作は、DataWorks Enterprise Edition 以降のエディションでのみ使用できます。

2020.07.16

中国 (杭州)、中国 (上海)、中国 (深圳)、中国 (北京)、中国 (張家口)

DataWorks API 操作の概要

移行アシスタントのパブリックプレビュー

ワークスペース内のデータオブジェクト (定期タスク、手動タスク、リソース、関数、データソース、テーブルメタデータ、アドホッククエリ、SQL スクリプトテンプレートなど) をエクスポートできます。 また、完全エクスポートタスク、増分エクスポートタスク、またはカスタムエクスポートタスクを作成して、ビジネス要件に基づいて DataWorks のデータオブジェクトをエクスポートすることもできます。

2020.07

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、シンガポール

移行アシスタント

DataService Studio のアップグレード

DataService Studio の左側のナビゲーションウィンドウの項目が調整されます。

2020.07.28

  • API の関数を作成してフィルターを設定できるのは、DataWorks Enterprise Edition 以降のエディションをアクティブ化し、中国 (上海) リージョンにワークスペースを作成した場合のみです。

  • サービスオーケストレーション機能を使用できるのは、DataWorks Enterprise Edition 以降のエディションをアクティブ化し、中国 (上海) リージョンにワークスペースを作成した場合のみです。

DataService Studio の概要

6月

機能

説明

リリース日

リージョン

リファレンス

データソースクエリ

データソースクエリ機能がサポートされるようになりました。 ワークブックを変更するときに、この機能を使用してデータソースからデータを読み取り、分析できます。

2020.06.09

中国 (上海)

データの分析

4月

機能

説明

リリース日

リージョン

リファレンス

オペレーションセンターでの電話ベースのアラート

アラート通知は、[電話][ショートメッセージ]、および [メール] で送信できます。

重要

電話ベースのアラート機能は、DataWorks Professional Edition 以降のエディションでのみ使用できます。

2020.04.15

すべてのリージョン

カスタムアラートルールの作成