すべてのプロダクト
Search
ドキュメントセンター

DataWorks:トピックタイトル

最終更新日:Jun 11, 2025

このトピックでは、DataWorks のリリースノートについて説明し、関連リファレンスへのリンクを提供します。

2025

4月

機能

説明

リリース日

リージョン

範囲

リファレンス

DataWorks での Lindorm の使用

Lindorm コンピューティングリソースをワークスペースに関連付けることができます。関連付けの後、DataWorks で Lindorm Spark ノードと Lindorm Spark SQL ノードを使用してタスクを開発できます。データマップで Lindorm のデータリネージを管理および維持できます。

2025-04-18

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (深セン)

新バージョンの Data Studio のパブリックプレビューに参加しているユーザー

データ統合

MongoDB 6.x および 7.x データソースがサポートされています。

2025-04-14

すべてのリージョン

すべてのユーザー

MongoDB データソース

旧バージョンの DataStudio または新バージョンの Data Studio

MaxCompute と Hologres 間のメタデータマッピングとデータ同期がサポートされています。

2025-04-10

すべてのリージョン

すべてのユーザー

旧バージョンの DataStudio または新バージョンの Data Studio

DataWorks Agent がリリースされました。 DataWorks Agent を使用して、自然言語インタラクションに基づくデータ開発を実装できます。

2025-04-08

すべてのリージョン

すべてのユーザー

DataWorks Agent

3月

機能

説明

リリース日

リージョン

範囲

リファレンス

データ統合

Milvus データソースがサポートされています。

2025-03-27

すべてのリージョン

すべてのユーザー

データ統合

MySQL データベースのすべてのデータをリアルタイムで LogHub に同期することがサポートされています。

2025-03-12

すべてのリージョン

すべてのユーザー

オペレーションセンター

Copilot ベースのインテリジェント検索とビュー保存機能がサポートされています。

2025-03-03

すべてのリージョン

すべてのユーザー

2月

機能

説明

リリース日

リージョン

範囲

リファレンス

オペレーションセンター

インテリジェント診断タスクの実行ログで使用される内部 IP アドレスを使用してアクセスされる E-MapReduce (EMR) の Web UI は、インターネット経由でアクセスできます。

2025-02-26

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (香港)、日本 (東京)、シンガポール、マレーシア (クアラルンプール)、インドネシア (ジャカルタ)、ドイツ (フランクフルト)、米国 (シリコンバレー)、米国 (バージニア)、UAE (ドバイ)

DataWorks Professional Edition 以上のエディションのユーザー

インテリジェント診断

オペレーションセンター

EMR ノードがベースラインに関連付けられており、ベースラインが有効になっている場合、旧バージョンの DataStudio または新バージョンの Data Studio で EMR ノードの ENABLE_TASK_PRIORITY パラメーターを設定して、EMR ノードのスケジュールに使用される YARN キューの優先順位を制御できます。

2025-02-14

すべてのリージョン

すべてのユーザー

ベースラインと YARN キュー間の優先順位マッピングを設定する

旧バージョンの DataStudio または新バージョンの Data Studio

PyODPS 3 ノードの PyODPS バージョンは、旧バージョンの DataStudio または新バージョンの Data Studio でアップグレードできます。

2025-02-14

すべてのリージョン

すべてのユーザー

DataWorks コパイロット

DataWorks Copilot では、次の DeepSeek モデルがサポートされています。DeepSeek-R1-671B および DeepSeek-R1-Distill-Qwen-32B

2025-02-14

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、および中国 (成都)

すべてのユーザー

DataWorks Copilot

DataWorks Copilot

コードの最適化とコードテスト機能は、DataWorks Copilot によってサポートされています。

2025-02-14

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、シンガポール、マレーシア (クアラルンプール)、インドネシア (ジャカルタ)

すべてのユーザー

DataWorks Copilot

個人開発環境

個人開発環境は Data Studio でサポートされています。

  • 個人開発環境インスタンスは、GPU イメージに基づいて作成できます。 GPU イメージは、TensorFlow や PyTorch などの深層学習フレームワークに適しています。

  • 個人開発環境インスタンスには、自動シャットダウンポリシーと自動シャットダウン設定を構成できます。

2025-02-12

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

個人開発環境

オペレーションセンター

自動 O&M 機能では、自動再実行がサポートされています。

2025-02-10

すべてのリージョン

すべてのユーザー

自動 O&M

Data Studio の新しいノードタイプ

SUB_PROCESS ノードは Data Studio でサポートされています。SUB_PROCESS は、ワークフロー内で別のワークフローを参照するために使用できる特別なノードタイプです。SUB_PROCESS を使用すると、複雑なタスクを複数のサブタスクに分割できます。各サブタスクを個別に定義および管理できるため、タスクの保守性と再利用性が向上します。

2025-02-06

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

SUB_PROCESS ノード

1月

機能

説明

リリース日

リージョン

範囲

参照資料

新しいデータソースタイプ

PolarDB-O (シャーディング) データソースがサポートされています。

2025-01-14

すべてのリージョン

すべてのユーザー

バッチ同期タスクを設定して、シャーディングデータベースのテーブルからデータを同期する

旧バージョンリソースグループのゾーンの変更

旧バージョン リソースグループのゾーンを変更できます。 これにより、リソースのディザスタリカバリ機能が強化され、迅速かつ便利な方法で障害に対応できます。

2025-01-02

すべてのリージョン

すべてのユーザー

2024

12月

機能

説明

リリース日

リージョン

範囲

参照資料

Data Studio の新しいノードタイプ

ADB Spark SQL ノードは Data Studio でサポートされています。 ADB Spark SQL ノードは、AnalyticDB Spark SQL タスクを開発し、定期的にスケジュールしたり、AnalyticDB Spark SQL タスクを他のタイプのタスクと統合したりするために使用できます。

2024-12-19

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

詳細については、「ADB Spark SQL ノード」をご参照ください。

Data Studio の新しいノードタイプ

ADB Spark ノードは Data Studio でサポートされています。 ADB Spark ノードは、AnalyticDB Spark タスクを開発し、定期的にスケジュールしたり、AnalyticDB Spark タスクを他のタイプのタスクと統合したりするために使用できます。

2024-12-19

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

詳細については、「ADB Spark ノード」をご参照ください。

Hologres 動的テーブルの使用

Hologres 動的テーブル機能は、DataWorks データカタログと統合されています。 これにより、DataWorks データカタログは、動的テーブル管理、スケジューリング依存関係構成、タスクメンテナンスなどの操作のための一連の可視化ツールを提供できます。

2024-12-13

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

詳細については、「Hologres 動的テーブルを使用する」をご参照ください。

新しいデータソースタイプ

TiDB データソースがサポートされています。

2024-12-04

すべてのリージョン

すべてのユーザー

詳細については、「TiDB データソース」をご参照ください。

Data Quality

Data Quality に、形式検証カテゴリの監視ルールテンプレートが追加されました。 監視ルールテンプレートでカスタム正規表現を構成して、必要なデータ形式を定義できます。 メールアドレス、電話番号、携帯電話番号、ID カード番号などのオブジェクト用の組み込み監視ルールテンプレートが提供されています。

2024-12-02

すべてのリージョン

すべてのユーザー

詳細については、「組み込みルールテンプレートを表示する」をご参照ください。

11月

機能

説明

リリース日

リージョン

範囲

参照資料

データ同期

OceanBase MySQL テナントによって、ApsaraDB for OceanBase データベースのすべてのデータをリアルタイムで MaxCompute に同期できます。

2024-11-21

すべてのリージョン

すべてのユーザー

詳細については、「ApsaraDB for OceanBase データベースのすべてのデータをリアルタイムで MaxCompute に同期する」をご参照ください。

データマップ

データマップが提供するメタデータ収集機能を使用して、AnalyticDB for Spark データソースのメタデータを収集および管理できます。

2024-11-21

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

詳細については、「メタデータ収集」をご参照ください。

データマップ

データマップの MaxCompute テーブルの詳細ページでデータインサイトタスクを作成して、詳細なデータ分析と解釈に基づいてデータの統計と分布を取得できます。

2024-11-21

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (ウランチャブ)、中国 (深セン)

すべてのユーザー

詳細については、「MaxCompute テーブルデータ」をご参照ください。

データ資産ガバナンス

Data Governance Center がデータ資産ガバナンスにアップグレードされました。 データ資産ガバナンスは、構成されたガバナンスプランに基づいて、データストレージ、タスクコンピューティング、コード開発、データ品質の各ディメンションで処理が必要な問題を検出できます。 データ資産ガバナンスは、データガバナンスの有効性を評価するためのヘルススコアを提供し、さまざまな観点からガバナンスの結果を可視化します。 これにより、ガバナンス目標を効率的に達成できます。 データ資産ガバナンスは、ビジネス資産管理、資産分析、タスクのリソース消費の詳細、コスト見積もりなどの機能も提供し、さまざまなリソースの使用状況の詳細をより深く理解するのに役立ちます。

2024-11-14

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深セン)、中国 (成都)、中国 (香港)、シンガポール、マレーシア (クアラルンプール)、インドネシア (ジャカルタ)、ドイツ (フランクフルト)、米国 (シリコンバレー)、米国 (バージニア)

すべてのユーザー

詳細については、「データ資産ガバナンス」をご参照ください。

コンピューティングリソース

AnalyticDB for Spark コンピューティングリソースをワークスペースに関連付けることができます。

2024-11-05

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

詳細については、「コンピューティングリソースをワークスペースに関連付ける (データ開発 (Data Studio) (新版) のパブリックプレビューに参加する がオン)」をご参照ください。

個人開発環境を Git リポジトリに接続する

個人開発環境を Git リポジトリと統合して、コードバージョン管理とチームコラボレーションを容易にすることができます。

2024-11-04

すべてのリージョン

Data Studio のパブリックプレビューに参加しているユーザー

詳細については、「個人開発環境を Git リポジトリに接続する」をご参照ください。

10月

機能

説明

リリース日

リージョン

範囲

参照資料

イメージ管理

DataWorks でカスタムイメージを永続イメージとして作成できます。 これにより、ノードでタスクを実行するたびに同じイメージ環境を使用できるため、イメージ環境を繰り返しデプロイする必要がなくなります。 これにより、ランタイム環境の一貫性が確保され、タスクの実行時間、コンピューティングコスト、トラフィックコストが削減されます。

2024.10.18

中国 (北京)、中国 (上海)、中国 (深セン)、中国 (杭州)、中国 (香港)、中国 (張家口)、シンガポール、マレーシア (クアラルンプール)、インドネシア (ジャカルタ)、日本 (東京)、ドイツ (フランクフルト)、英国 (ロンドン)、米国 (シリコンバレー)、米国 (バージニア)

すべての DataWorks ユーザー

詳細については、「イメージを管理する」をご参照ください。

サーバーレス同期タスクのサポート

サーバーレス同期タスクは Data Integration でサポートされています。 サーバーレス同期タスクのリソースグループを構成する必要はありません。 これにより、ビジネスのみに集中できます。

2024.10.12

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深セン)、中国 (香港)、英国 (ロンドン)、米国 (シリコンバレー)、米国 (バージニア)、日本 (東京)、ドイツ (フランクフルト)、マレーシア (クアラルンプール)

すべての DataWorks ユーザー

詳細については、「サーバーレス同期タスクを構成する」をご参照ください。

9月

機能

説明

リリース日

リージョン

範囲

参照資料

新しいタイプのリアルタイム同期タスク

Simple Log Service Logstore から Data Lake Formation (DLF) 2.0 へのデータのリアルタイム同期がサポートされています。 データは Paimon 形式で DLF 2.0 に書き込まれ、データ同期中に簡単なデータ処理がサポートされます。

2024.9.13

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「Simple Log Service Logstore から DLF にデータをリアルタイムで同期する」をご参照ください。

リアルタイム同期タスクの実行中のリソースの自動スケーリング

リアルタイム同期タスク用に構成されたリソースは、タスクの実行中に自動的にスケーリングできます。 タスクを停止する必要はありません。 調整計画を構成するだけで済みます。 システムは、タスクの実行中に、調整計画に基づいてタスクのリソースを調整します。

2024.9.13

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「リソース調整の動的スケーリング条件」をご参照ください。

8月

機能

説明

リリース日

リージョン

範囲

参照資料

新しいタイプのリアルタイム同期タスク

MySQL データベースから SelectDB または Apache Doris へのデータのリアルタイム同期がサポートされています。

2024.8.29

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「MySQL データベースのすべてのデータをリアルタイムで SelectDB に同期する」をご参照ください。

Hologres の権限管理

DataWorks セキュリティセンターでは、ユーザーの Hologres データへのアクセス権限を管理できます。 承認済み ID の構成、Hologres テーブルの権限の要求、権限要求の処理、権限要求レコードと要求処理レコードの表示を行うことができます。

2024.8.22

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「Hologres の権限を管理する」をご参照ください。

SQL クエリ結果の DingTalk シートへのエクスポート

DataWorks の SQL クエリ結果を DingTalk シートにエクスポートできます。 DataWorks で SQL クエリを実行した後、DingTalk アプリケーションを使用してクエリ結果を DingTalk シートにエクスポートできます。 これにより、クエリ結果を Excel ファイルとしてダウンロードすることによって発生するデータセキュリティの問題を防ぎます。

2024.8.14

中国 (張家口)

中国 (成都)

すべての DataWorks ユーザー

MaxCompute データソースへのアクセスに使用されるデフォルトアクセス ID の権限要件の緩和

MaxCompute データソースへのアクセスに使用されるデフォルトアクセス ID の権限要件が緩和されました。 MaxCompute データソースを追加するときに、デフォルトアクセス ID パラメーターを Alibaba Cloud RAM ユーザーに設定する場合、関連する RAM ユーザーが関連する MaxCompute プロジェクトの管理者ロールまたはスーパー管理者ロールの権限を持っていることを確認する必要があります。 権限要件が緩和される前は、関連する RAM ユーザーに AdministratorAccess ポリシーがアタッチされている必要があります。

2024.8.8

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「MaxCompute データソースを追加する」をご参照ください。

DataWorks Enterprise Edition での CloudSSO のサポート

DataWorks Enterprise Edition では CloudSSO がサポートされています。 CloudSSO を使用すると、サードパーティまたはセルフマネージドの ID プロバイダー (IdP) を使用して Alibaba Cloud 管理コンソールにログインし、DataWorks を使用できます。

2024.8.8

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「DataWorks エディション間の違い」をご参照ください。

7月

機能

説明

リリース日

リージョン

範囲

参照資料

RAM ポリシードキュメントの更新

ListUserResources 権限が AliyunDataWorksReadOnlyAccess ポリシーに追加され、すべてのユーザーのすべての DataWorks リソースに関する情報を表示できるようになりました。

2024.7.10

すべてのリージョン

すべての DataWorks ユーザー

EMR クラスタの登録に関連する機能の更新

EMR クラスタの DataWorks への登録に関して、次の機能がサポートされています。

  • ビジネス要件に基づいて Kyuubi 接続情報を構成します。

  • EMR Serverless Spark クラスタを登録します。

2024.7.10

中国 (張家口) (EMR Serverless Spark をサポートする唯一のリージョン)

すべての DataWorks ユーザー

DataStudio の新しいノードタイプ

CDH Spark SQL ノードは DataStudio でサポートされています。 CDH Spark SQL ノードを使用して、CDH Spark SQL タスクを開発し、定期的にスケジュールしたり、タスクを他のタイプのタスクと統合したりできます。

2024.7.10

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「CDH Spark SQL ノードを作成する」をご参照ください。

6月

機能

説明

リリース日

リージョン

範囲

参照資料

Data Integration の新しい同期リンク

Data Integration を使用して、MySQL データベースのすべてのデータをオフラインモードまたはリアルタイムで StarRocks に同期できます。

2024.06.28

すべてのリージョン

すべての DataWorks ユーザー

DataStudio でのデータプッシュノードの作成

DataStudio のワークフローでは、データプッシュノードを作成し、データを処理してデータテーブルを生成するために使用されるノードの子孫ノードとして構成できます。 その後、データプッシュノードを使用して、先祖ノードによって生成されたデータをメッセージカードの形式で DingTalk グループまたは Lark グループに定期的にプッシュできます。

説明

データプッシュノードを使用するには、[チケットの送信]を行い、テクニカルサポートに連絡してスケジューリング用のリソースグループをスペックアップする必要があります。

2024.6.28

  • 中国 (杭州)

  • 中国 (上海)

  • 中国 (北京)

  • 中国 (深圳)

  • 中国 (成都)

  • 中国 (香港)

  • シンガポール

  • マレーシア (クアラルンプール)

  • 米国 (シリコンバレー)

  • 米国 (バージニア)

  • ドイツ (フランクフルト)

すべての DataWorks ユーザー

ワークフローでのデータ プッシュ ノードの構成のベスト プラクティス

サーバーレス リソースグループのリリース

DataWorks のリソース管理を容易にし、ユーザーエクスペリエンスを向上させるために、DataWorks にサーバーレス リソースグループが導入されました。サーバーレス リソースグループは、専用スケジューリングリソースグループ、データ統合専用リソースグループ、およびデータサービススタジオ専用リソースグループのコア機能を同時に実装できます。データ同期、タスクのスケジューリングと実行、API 呼び出しと管理などの操作は、1 つのサーバーレス リソースグループのみを使用して実行できます。

2024.6.11

  • 中国 (北京)

  • 中国 (上海)

  • 中国 (深圳)

  • 中国 (杭州)

  • 中国 (香港)

  • 中国 (張家口)

  • シンガポール

  • マレーシア (クアラルンプール)

  • インドネシア (ジャカルタ)

  • 日本 (東京)

  • ドイツ (フランクフルト)

  • 英国 (ロンドン)

  • 米国 (シリコンバレー)

  • 米国 (バージニア)

すべての DataWorks ユーザー

Lindorm 分散処理システム (LDPS) に基づくタスク開発の新しいベストプラクティス

LDPS は CDH と互換性があります。CDH クラスターを DataWorks に登録し、LDPS 接続情報を設定した後、DataWorks でインタラクティブ SQL クエリ、SQL タスク開発、JAR タスク実行などの操作を実行できます。

2024.6.5

すべてのリージョン

すべての DataWorks ユーザー

LDPS に基づいてタスクを開発する

データ同期用の新しいデータソースタイプ

Azure Blob Storage データソースがデータ同期でサポートされるようになりました。

2024.6.3

すべてのリージョン

すべての DataWorks ユーザー

Azure Blob Storage データソース

5月

機能

説明

リリース日

リージョン

範囲

参考資料

Object Storage Service (OSS) からの MySQL バイナリログの読み取りのサポート

MySQL バイナリログは OSS から読み取ることができます。

MySQL データソースを追加する際に、[構成モード] パラメーターを [Alibaba Cloud インスタンスモード] に設定し、リージョンパラメーターを現在の DataWorks ワークスペースが存在するリージョンに設定した場合、[OSS からのバイナリログの読み取りを有効にする] をオンにすることができます。 このスイッチをオンにすると、DataWorks は ApsaraDB RDS for MySQL からバイナリログを読み取れない場合に、Object Storage Service (OSS) からバイナリログを取得しようとします。 これにより、リアルタイム同期タスクが中断されるのを防ぎます。

2024.5.24

すべてのリージョン

すべての DataWorks ユーザー

MySQL データソース

Data Quality サービスの更新

Data Quality サービスが更新されました。 更新後、監視ルールに基づいて、テーブル内の特定の範囲のデータをチェックできます。 これにより、データ品質監視のプロセスが最適化されます。

2024.5.21

新しいバージョンの Data Quality は段階的にリリースされます。 DataWorks コンソールで、新しいバージョンがサポートされているリージョンを表示できます。 ビジネスが所在するリージョンで新しいバージョンの Data Quality の機能が利用できない場合は、「以前のバージョンの Data Quality」をご参照ください。

すべての DataWorks ユーザー

新しいバージョンの Data Quality

Data Integration の新しい同期リンク

Hologres データベース内のすべてのデータをオフラインモードで別の Hologres データベースに同期できます。

2024.5.20

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「Hologres データベース内のすべてのデータをオフラインモードで別の Hologres データベースに同期する」をご参照ください。

DataWorks によるホストへのリモートアクセスとホスト上でのスクリプト実行のトリガーのサポート

DataWorks 内の特定の SSH データソースに基づいて SSH ノードを作成および使用し、データソースに接続されているホストにリモートアクセスし、ホスト上で実行されているスクリプトをトリガーできます。

2024.5.15

すべてのリージョン

すべての DataWorks ユーザー

DataStudio での EMR Kyuubi ノードのサポート

EMR Kyuubi ノードは DataStudio でサポートされています。 EMR Kyuubi ノードを使用して、Kyuubi タスクを開発し、定期的にスケジュール設定し、Kyuubi タスクを他のタイプのタスクと統合できます。

2024.5.11

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「EMR Kyuubi ノードを作成する」をご参照ください。

DataStudio の新しいタイプのデータベースノード

DRDS ノード、PolarDB for MySQL ノード、Doris ノードなど、複数のタイプのデータベースノードが DataStudio でサポートされています。 これらのタイプのノードを使用して、関連タイプのタスクを開発し、定期的にスケジュール設定し、タスクを他のタイプのタスクと統合できます。

2024.5.11

すべてのリージョン

すべての DataWorks ユーザー

4月

機能

説明

リリース日

リージョン

範囲

参照資料

PostgreSQL データソースを追加する際の SSL 認証構成

データ同期のために PostgreSQL データソースが追加される際に、SSL 認証を構成できます。

2024.4.26

すべてのリージョン

すべての DataWorks ユーザー

PostgreSQL データソース

Data Governance Center での Hologres データソースのサポート

Data Governance Center では、Hologres データソースがサポートされています。

Data Governance Center で Hologres データソースを使用する前に、データマップで Hologres のメタデータを収集する必要があります。詳細については、「メタデータ収集」をご参照ください。

2024.4.24

Hologres データソースは、中国 (北京)、中国 (上海)、中国 (杭州)、中国 (深圳) のリージョンでのみ Data Governance Center をサポートしています。

すべての DataWorks ユーザー

Data Governance Center の概要

Data Governance Center でのマテリアライズドビューのサポート

DataWorks は、インテリジェントな推奨事項に基づいて、マテリアライズドビューの自動ガバナンスをサポートしています。これは、多数の類似したサブクエリを含む、頻繁に発生するビッグデータコンピューティングタスクのためのインテリジェントで自動化されたソリューションです。マテリアライズドビューでインテリジェント推奨機能を有効にすると、DataWorks は MaxCompute 内の類似したサブクエリを自動的に識別および分類し、マテリアライズドビューを作成するための推奨事項を生成できます。ビジネス要件に基づいて、数回クリックするだけでマテリアライズドビューを作成できます。これにより、計算効率が大幅に向上し、計算リソースが節約されます。

2024.4.12

すべてのリージョン

すべての DataWorks ユーザー

マテリアライズドビューの自動ガバナンス

Alibaba Cloud アカウントまたは RAM ユーザーと、CDH または Cloudera Data Platform (CDP) クラスタの OpenLDAP アカウント間のマッピングのサポート

CDH または CDP クラスタを DataWorks に登録する際に、ビジネス要件に基づいて、Alibaba Cloud アカウントまたは RAM ユーザーと CDH または CDP クラスタの OpenLDAP アカウント間のマッピングを構成できます。マッピングが構成されると、Alibaba Cloud アカウントまたは RAM ユーザーによって送信された CDH または CDP タスクは、マッピングされた OpenLDAP アカウントによって実行されます。 CDH クラスタ内の異なる Alibaba Cloud アカウントまたは RAM ユーザーがアクセスできるデータの権限を分離する場合、OpenLDAP アカウントマッピングタイプを使用できます。

2024.4.8

中国 (北京)、中国 (上海)、中国 (杭州)、中国 (深圳)、中国 (張家口)、中国 (成都)

すべての DataWorks ユーザー

テナントメンバーアカウントと CDH または CDP クラスタアカウント間のマッピングを構成する

3月

機能

説明

リリース日

リージョン

範囲

参照資料

データバックフィル機能の新バージョン

データバックフィル機能の新バージョンがリリースされました。自動トリガー タスクが開発、コミット、およびデプロイされると、自動トリガー タスクはスケジューリング構成に基づいて実行されます。指定した時間範囲で自動トリガー タスクを実行する場合は、タスクのデータをバックフィルできます。履歴期間または将来期間のデータを自動トリガー タスクに対してバックフィルして、データを時間ベースのパーティションに書き込むことができます。新しいバージョンでは、次のデータバックフィル方式がサポートされています。

2024.3.28

すべてのリージョン

すべての DataWorks ユーザー

データのバックフィルとデータバックフィル インスタンスの表示(新バージョン)

オープン プラットフォームでの Function Compute に基づく拡張機能の開発とデプロイ

DataWorks の拡張機能では、カスタム イベント メッセージ ロジックを構成して、不適切な動作のインターセプトやブロックなど、ユーザーの動作を管理できます。 Function Compute を使用して拡張機能を開発およびデプロイする場合、特定のイベント メッセージは関連する Function Compute サービスに自動的に送信されます。次の点に注意してください。

  • 操作は簡単です。拡張機能をデプロイするには、1 つの関数のみが必要です。

  • Function Compute の使用には料金が発生します。詳細については、「請求の概要」をご参照ください。

  • Function Compute に基づいてデプロイされた拡張機能は、データ ダウンロードの事前イベントのみを処理できます。

2024.3.19

  • 中国 (北京)

  • 中国 (杭州)

  • 中国 (上海)

  • 中国 (張家口)

  • 中国 (深圳)

  • 中国 (成都)

  • 米国 (シリコンバレー)

  • 米国 (バージニア)

  • ドイツ (フランクフルト)

  • 日本 (東京)

  • 中国 (香港)

  • シンガポール

DataWorks Enterprise Edition のユーザー

Function Compute に基づく拡張機能の開発とデプロイ

データ モデリングにおけるモデルのカスタム公開ポリシーのサポート

データ モデリングでは、ビジネス要件に基づいてモデルの公開ポリシーを定義できます。公開ポリシーを有効にすると、モデルを公開するときに、ポリシーの構成に基づいてビジネス要件を満たす公開モードを選択できます。

2024.3.12

すべてのリージョン

データ モデリング サービスをアクティブ化した DataWorks ユーザー

公開ポリシーの管理

2月

機能

説明

リリース日

リージョン

範囲

参照資料

DataWorks での CDP タスクまたは CDH タスクの開発に関する使用上の注意を追加

DataWorks での CDP タスクまたは CDH タスクの開発に関する使用上の注意が追加されました。 使用上の注意には、基本的な開発プロセス、料金の説明、環境の準備、および権限管理が含まれます。

2024.2.21

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「DataWorks での CDP タスクまたは CDH タスクの開発に関する使用上の注意」をご参照ください。

DataService Studio の Alibaba Cloud インスタンスモードで StarRocks データソースのサポートを追加

EMR Serverless StarRocks クラスタが作成されると、DataWorks に StarRocks データソースとして Alibaba Cloud インスタンスモードでクラスタを追加できます。 データソースは DataWorks DataService Studio の API にすばやくカプセル化して、データの共有と公開を実現できます。

2024.2.20

すべてのリージョン

すべての DataWorks ユーザー

データソースを追加する

データマップでのデータ開発コードの検索機能

DataWorks データマップでは、データ開発コードの検索機能がサポートされています。 この機能を使用して、ワークスペース全体でデータ開発コードを検索し、キーワードに基づいて目的のコードを見つけることができます。 これにより、開発効率が向上し、プロジェクトの冗長性が軽減されます。

2024.2.20

すべてのリージョン

DataWorks Standard Edition 以上をご利用のユーザー

詳細については、「コードを検索する」をご参照ください。

データのアップロードおよびダウンロード機能のサポート

DataWorks では、データのアップロードおよびダウンロード機能がサポートされています。 オンプレミスの CSV ファイルと OSS オブジェクトを MaxCompute にアップロードして処理および分析できます。 アップロードされたファイルのリストと、DataWorks データ分析などのサービスによってダウンロードされたファイルのリストも管理できます。

2024.2.20

すべてのリージョン

すべての DataWorks ユーザー

DataStudio での CDH 関連ノードのサポート

CDH Hive、CDH Spark、CDH MR、CDH Presto、CDH Impala ノードなどの CDH 関連ノードは、DataStudio でサポートされています。 これらのノードを使用して、CDH 関連タスクを開発し、定期的にスケジュールできます。

2024.2.19

すべてのリージョン

すべての DataWorks ユーザー

データセキュリティガードのシステム設定ページの新バージョン

システム設定ページでは、次の操作を実行できます。

  • コンテンツベースの機密データ識別を有効または無効にし、識別範囲を指定します。

  • ウォーターマーク付きファイルの保存期間を指定します。

  • 識別されたデータのセキュリティレベルを表示するかどうかを指定します。

  • アラート通知を受信するためのメールアドレスと Webhook URL を指定します。

上記の操作は、潜在的なセキュリティリスクをできるだけ早く特定して解決するのに役立ちます。

2024.2.6

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「システム設定を構成する」をご参照ください。

1月

機能

説明

リリース日

リージョン

範囲

参照資料

DataStudio および DataAnalysis でのマスクされたクエリ結果の表示

EMR テーブルのデータについて、データセキュリティガードでは、分類と感度レベル分類、機密データの識別、およびマスクされたクエリ結果の表示がサポートされています。

DataStudio または DataAnalysis で SQL 文を実行してデータのクエリを実行した後に取得された結果に機密データが含まれている場合、システムは特定のデータマスキングルールに基づいて機密データを自動的にマスクまたは暗号化し、マスクされたクエリ結果を返します。 これにより、企業のデータセキュリティが向上します。

2024.1.25

すべてのリージョン

すべての DataWorks ユーザー

データマップでのリアルタイム同期リンクに関連するデータ系列の表示

次のリアルタイム同期リンクに関連するデータ系列は、データマップで解析および表示できます。

  • MySQL から MaxCompute または Hologres へのリアルタイムデータ同期

  • Kafka から MaxCompute または Hologres へのリアルタイムデータ同期

  • LogHub から MaxCompute または Hologres へのリアルタイムデータ同期

  • PolarDB から MaxCompute へのリアルタイムデータ同期

リアルタイム同期系列とバッチ同期系列の組み合わせ分析は、データ転送状況を包括的に理解するのに役立ちます。

2024.1.15

すべてのリージョン

すべての DataWorks ユーザー

系列を表示する

2023

12月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

DataStudio とデータソースの関連付け

データソースまたはクラスタを DataStudio と関連付けることができます。関連付けの後、データソースまたはクラスタを使用してデータモデリングを実行したり、オペレーションセンターでタスクを定期的にスケジュールしたりできます。また、データソースまたはクラスタのデータを読み取り、データ開発操作を実行することもできます。

2023.12.29

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「データ開発の準備:計算リソースまたはクラスタを DataStudio に関連付ける」をご参照ください。

計算リソースのリリース

MaxCompute、Hologres、AnalyticDB for PostgreSQL、AnalyticDB for MySQL、および ClickHouse コンピュートエンジンは計算リソースとして管理され、EMR および CDH または CDP コンピュートエンジンはオープンソースクラスタとして管理されます。これは、ユーザーエクスペリエンスの向上に役立ちます。変更後、計算エンジンの作成や変更など、計算エンジンに関連する操作は、DataWorks コンソールの管理センターの [計算リソース] または [オープンソースクラスタ] ページで実行されます。

2023.12.29

すべてのリージョン

すべての DataWorks ユーザー

新しい拡張ポイントイベント

Open Platform に次の拡張ポイントイベントが追加されました。

  • DeleteProject:テナント内のワークスペース削除の事前イベント

  • ProjectDeleted:テナント内のワークスペース削除の事後イベント

  • DownloadResources:データダウンロードの事前イベント

2023.12.27

すべてのリージョン

すべての DataWorks ユーザー

拡張ポイントイベントの新しい適用範囲

拡張ポイントイベントの次の適用範囲が追加されました。

  • テナントレベル:テナントレベルのイベントは、テナントに対して有効です。

  • ワークスペースレベル:ワークスペースレベルのイベントは、特定のワークスペースに対して有効です。

拡張機能を登録するときは、拡張ポイントイベントのタイプを 1 つだけ選択できます。

2023.12.22

  • 中国 (北京)

  • 中国 (杭州)

  • 中国 (上海)

  • 中国 (張家口)

  • 中国 (深圳)

  • 中国 (成都)

  • 米国 (シリコンバレー)

  • 米国 (バージニア)

  • ドイツ (フランクフルト)

  • 日本 (東京)

  • 中国 (香港)

  • シンガポール

すべての DataWorks ユーザー

データガバナンスセンターの SQL 効率最適化のための新しいチェック項目

データガバナンスセンターに 5 つのチェック項目が追加されました。チェック項目には、MaxCompute、EMR Hive、および EMR Spark SQL タスク用の DescartesChecker、MasterTableOnConditionChecker、および Force Scan Checker が含まれます。チェック項目は、研究開発段階での事前イベントチェックとタイムリーな最適化、計算効率の向上、大量の計算リソースの無駄の削減、およびデータ出力の適時性を確保するのに役立ちます。

2023.12.22

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「チェック項目を設定する」をご参照ください。

StarRocks データソースの完全サポート

StarRocks データソースは、DataWorks の次のサービスで完全にサポートされています。

  • Data Integration:StarRocks データソースとのデータ同期がサポートされています。

  • DataStudio:StarRocks タスクの作成と定期的なスケジューリングがサポートされています。

  • DataAnalysis:StarRocks データのクエリと分析がサポートされています。

  • DataService Studio:StarRocks データテーブルを API にカプセル化できます。

  • データマップ:StarRocks メタデータをデータマップで管理、検索、および表示できます。

2023.12.15

すべてのリージョン

すべての DataWorks ユーザー

新しい EMR Hadoop クラスタバージョンのサポート

DataWorks では、次の EMR Hadoop クラスタバージョンがサポートされています。

  • EMR-3.26.3

  • EMR-3.27.2

  • EMR-3.29.0

  • EMR-3.32.0

  • EMR-3.35.0

  • EMR-3.38.2

  • EMR-3.38.3

  • EMR-4.3.0

  • EMR-4.4.1

  • EMR-4.5.0

  • EMR-4.5.1

  • EMR-4.6.0

  • EMR-4.8.0

  • EMR-4.9.0

  • EMR-5.2.1

  • EMR-5.4.3

  • EMR-5.6.0

2023.12.15

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「DataWorks での EMR ノードの開発に関する使用上の注意」をご参照ください。

DataStudio のチェックノードの新しいチェック項目

DataStudio のチェックノードでは、新しいチェック項目がサポートされています。チェックノードを使用して、チェックポリシーに基づいて MaxCompute パーティションテーブル、FTP ファイル、および OSS オブジェクトの可用性をチェックできます。チェックノードのチェックポリシーで指定された条件が満たされると、チェックノードのタスクは正常に実行されます。

タスクの実行が項目に依存している場合は、チェックノードを使用して項目の可用性をチェックし、タスクをチェックノードの子孫タスクとして設定できます。チェックノードのチェックポリシーで指定された条件が満たされると、チェックノードのタスクは正常に実行され、その後、その子孫タスクが実行されるようにトリガーされます。

2023.12.08

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「チェックノードを設定する」をご参照ください。

DataStudio での PAI DLC ノードのサポート

PAI DLC ノードは DataStudio でサポートされています。PAI DLC ノードを使用して、DLC タスクを定期的にスケジュールできます。

2023.12.08

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「PAI DLC ノードを作成して使用する」をご参照ください。

セキュリティセンターのリスク識別ルールのサポート

リスク識別ルールは、セキュリティセンターでサポートされています。セキュリティセンターでは、管理者がリスク識別機能を拡張機能として DataWorks に登録できます。このようにして、拡張機能をリスク識別ルールとして使用して、ユーザー操作のリスクを識別できます。

デフォルトまたはカスタムのリスク識別ルールを使用して、データダウンロード操作のリスクを識別し、ビジネス要件に基づいてブロッキングまたは承認応答ポリシーを設定できます。

2023.12.08

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「リスク識別ルール」をご参照ください。

11月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

DataStudio でのチェックノードのサポート

チェックノードは DataStudio でサポートされています。チェックノードを使用して、特定のパーティションが MaxCompute パーティションテーブルに存在するかどうか、またはデータがパーティションに書き込まれているかどうかを確認できます。タスクが MaxCompute パーティションテーブルに依存している場合は、チェックノードを使用して、テーブル内のパーティションデータが最初に使用可能かどうかを確認できます。これにより、無効なデータが使用されるのを防ぎます。

2023.11.20

  • 中国 (成都)

  • 中国 (張家口)

  • 中国 (北京)

  • 中国 (上海)

  • マレーシア (クアラルンプール)

すべての DataWorks ユーザー

詳細については、「チェックノードを設定する」をご参照ください。

8月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

スケジューリングサイクルの指定のサポート

スケジューリングカレンダー機能がサポートされています。スケジューリングカレンダーの日付をスケジューリング日または非スケジューリング日としてマークすることで、スケジューリングサイクルを指定できます。

2023.08.24

すべてのリージョン

DataWorks 企業版のユーザー

詳細については、「スケジューリングカレンダーを設定する」をご参照ください。

データガバナンスセンターにおけるデータレイク開発リンクに沿ったガバナンスのサポート

EMR、Data Lake Formation (DLF)、および DataWorks で構成されるデータレイク開発リンクに沿って特定された問題に対して、プロアクティブなガバナンスがサポートされています。次のガバナンス機能がサポートされています。

  • ガバナンスのヘルススコアの評価

  • 研究開発およびストレージディメンションにおけるガバナンス問題の自動特定

  • Hive SQL および Spark SQL に基づく事前イベントチェック

2023.08.24

  • 中国北部 2 Ali Gov

  • 中国東部 2 金融

  • 中国 (上海)

  • 中国 (杭州)

  • 中国 (北京)

  • 中国 (深圳)

  • 中国 (成都)

  • 中国 (香港)

  • シンガポール

  • 米国 (シリコンバレー)

  • ドイツ (フランクフルト)

  • インドネシア (ジャカルタ)

DataWorks 企業版以上のエディションのユーザー

詳細については、「データガバナンスセンターの概要」をご参照ください。

6月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

Kafka から Hologres へのリアルタイム同期による抽出、変換、ロード (ETL) プロセスの実装

  • Kafka から Hologres へのリアルタイムデータ同期では、JSON 形式の Kafka データを解析し、他の基本的なデータ処理操作を実行して ETL プロセスを実装できます。

  • キーと値は、指定された JSON パスから取得でき、動的に拡張できます。これは、Kafka データソースからのメッセージの形式が変更されるシナリオに適しています。

  • タスク設定中のシミュレートされた実行がサポートされています。これにより、変換先に書き込むデータが事前に正しく処理されているかどうかを確認できます。

2023.06.01

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「Kafka データソース」をご参照ください。

MySQL データベースのすべてのデータを Hudi 形式の OSS データレイクにリアルタイムで同期

MySQL データベースのすべてのデータを OSS データレイクにリアルタイムで同期できます。データは Hudi 形式でデータレイクに書き込まれます。次の機能がサポートされています。

  • アリババクラウド DLF との自動統合により、管理用のメタデータを生成します。

  • インスタンスレベルの同期。一度に複数のソース MySQL データベースを選択できます。

  • 正規表現に基づいてソース MySQL データベースとテーブルを選択します。

  • データベースとテーブルの自動追加。ソース MySQL データベースとテーブルが追加されると、手動で介入することなく、データは OSS に自動的に同期されます。

2023.06.01

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「OSS データソース」をご参照ください。

データ同期のための Amazon Relational Database Service (Amazon RDS) データソースのサポート

Amazon RDS データソースは、MySQL データソースと同じ方法でデータ同期のために追加できます。Amazon RDS データソースは、MySQL データソースと同じ機能を提供します。

2023.06.01

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「MySQL データソース」をご参照ください。

4月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

データ分析結果を MaxCompute テーブルとして保存するためのサポート

データ分析結果を MaxCompute テーブルとして直接保存して、後続のクエリまたは結合分析に使用できます。データ分析結果を保存するためのテーブルを作成するためのコードを実行する必要はありません。

2023.4.20

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「クエリ結果に対する操作を実行する」をご参照ください。

DataAnalysis での数百万の SQL クエリ結果レコードのダウンロードのサポート

デフォルトでは、最大 10,000 件の SQL クエリ結果レコードをダウンロードできます。管理者は、セキュリティセンターでエディションごとに上限を変更できます。DataWorks 標準版の場合は 200,000 件、DataWorks プロフェッショナル版の場合は 2,000,000 件、DataWorks 企業版および DataWorks アルティメット版の場合は 5,000,000 件です。ダウンロード機能を無効にすることもできます。

2023.4.18

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「SQL クエリ」をご参照ください。

ビッグデータサービスのパブリックデータセットのリリース

淘宝、飛猪、阿里音楽、GitHub、TPC など、さまざまなプラットフォームのビッグデータおよび AI サービスのパブリックデータセットに基づいて、DataWorks および MaxCompute によってテラバイト単位のデータを迅速に分析できます。

2023.4.11

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「SQL クエリ」をご参照ください。

3月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

データガバナンスセンターにおけるガバナンス問題の通知のサポート

管理者と個々のユーザーは、日々のガバナンス問題の通知を設定できます。これにより、システムはシステムメッセージ、メール、DingTalk グループメッセージ、または Webhook URL によって関連エンジニアに通知を送信できます。これは、ガバナンス問題の処理を容易にします。

2023.3.15

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「ガバナンス問題の定期的な通知を設定する」をご参照ください。

データガバナンスセンターのストレージディメンションにおける長期ライフサイクルガバナンス項目のサポート

長期ライフサイクルガバナンス項目は、データガバナンスセンターのストレージディメンションでサポートされています。ガバナンス項目は、ユーザーが MaxCompute パーティションテーブルに適切なライフサイクルを指定して、ストレージリソースの無駄を削減するのに役立ちます。

2023.3.15

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「ガバナンス問題を処理する」をご参照ください。

DataService Studio が提供するアクセラレーションサービスの商用化

アクセラレーションサービスソリューションは、DataService Studio で導入されています。このソリューションを使用して、MaxCompute からデータをエクスポートすることなく、MaxCompute データのクエリを高速化するオンライン API を作成できます。これにより、クエリのパフォーマンスと効率が向上し、オンラインクエリの要件が満たされます。

2023.3.1

中国 (上海)、中国 (北京)、中国 (杭州)、および中国 (深圳)

すべての DataWorks ユーザー

詳細については、「API ベースのデータクエリのためのアクセラレーションソリューション」をご参照ください。

1月

機能

説明

リリース日

リージョン

範囲

関連ドキュメント

DataWorks での購入済みリソースの管理のサポート

次の機能がサポートされています。

リリースされていないすべてのリソースを DataWorks に表示できます。これにより、仕様のアップグレードまたはダウングレード、払い戻しの申請、リソースの更新などの操作を効率的に実行できます。

2023.1.11

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「料金の概要」をご参照ください。

データガバナンスセンターにおける複数タスクのグレースフルなアンデプロイのサポート

次の機能がサポートされています。

  • シナリオ固有のガバナンスプランが提供されています。このプランは、無効なタスクまたは繰り返されるタスクを一度に安全にアンデプロイする必要があるシナリオに適しています。

  • [グレースフルなアンデプロイ] ガバナンスプランが提供されています。ガバナンス担当者は、ガバナンスオブジェクトを選択することで、影響を受けるユーザーと資産を確認できます。

  • タスクを秩序正しくスムーズにアンデプロイするための段階的なアンデプロイプランが提供されています。アンデプロイプランには、スケジューリングの一時停止、スケジューリングの遅延、アンデプロイのフェーズ、およびフェーズステータスの通知が含まれます。

2023.1.9

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「グレースフルなアンデプロイ」をご参照ください。

基本モードのワークスペースの DataStudio でのコードレビューのサポート

コードレビュー機能は、基本モードのワークスペースの DataStudio でサポートされています。強制コードレビュー機能が有効になっている場合、ノードのコードは、コードレビューに合格した後でのみ本番環境で有効になります。

2023.1.5

すべてのリージョン

すべての DataWorks ユーザー

詳細については、「コードレビュー」をご参照ください。

2022

11月

機能

説明

リリース日

リージョン

スコープ

参照資料

DataService Studio の開発環境および本番環境でのデータソース指向の API カプセル化のサポート

標準モードのワークスペースでは、次の機能がサポートされています。

  • 選択したデータソースの環境タイプに基づいて、API の高度なパラメータを構成できます。 環境タイプは、開発または本番にすることができます。

  • API は、開発環境のデータベース内のデータに基づいてテストでき、本番環境のデータベース内のデータに基づいて公開できます。

2022.11.29

全リージョン

すべての DataWorks ユーザー

詳細については、「コードレス UI を使用して API を作成する」をご参照ください。

データマップでの Hive テーブルに対する権限要求のサポート

[データマップ] の EMR Hive テーブルの詳細ページに、[権限の要求] ボタンが追加されました。 このボタンをクリックすると、セキュリティセンターでテーブルの権限を要求できます。

2022.11.29

全リージョン

すべての DataWorks ユーザー

詳細については、「データマップでプレビューできる Hive テーブルの種類」をご参照ください。

データマップでのデータアルバムのサポート

[データマップ][データアルバム] ページが追加されました。 次の機能が提供されます。

  • データテーブルは、ビジネスカテゴリ、データ感度レベル、およびデータカテゴリに基づいて、データアルバムで整理および管理できます。

  • 頻繁に使用されるテーブル、チームテーブル、人気のあるテーブルなど、特定のテーブルをデータアルバムに追加できます。 この方法で、データテーブルを効率的に検索できます。

2022.11.16

全リージョン

すべての DataWorks ユーザー

詳細については、「ビジネスの観点からのテーブル管理: データアルバム」をご参照ください。

アップグレードされたデータ分析サービスにおける真新しい SQL クエリ体験

アップグレードされたデータ分析サービスでは、次の機能がサポートされています。

  • アカウント内でデータ検索に一般的に使用されるすべての SQL ファイルとすべてのデータテーブルセットを一元的に管理できます。

  • 必要な権限を持つユーザーは、SQL ステートメントを実行してビジネスデータを抽出できます。

  • SQL クエリ結果の二次処理と、処理された結果をチャートに表示することがサポートされています。

2022.11.15

全リージョン

すべての DataWorks ユーザー

詳細については、「SQL クエリ」をご参照ください。

DataService Studio のスクリプトモードで高度な SQL 構文を使用して作成された API のリクエストパラメータとレスポンスパラメータの解析のサポート

DataService Studio では、次の機能がサポートされています。

  • スクリプトモードで高度な SQL 構文を使用して API を作成した後、API の構成タブの右側ナビゲーションウィンドウにある [リクエストパラメータ] タブと [レスポンスパラメータ] タブで個別に [パラメータの解析] をクリックして、リクエストパラメータとレスポンスパラメータを解析できます。

  • パラメータを手動で指定することによって生成されるワークロードが削減されます。

2022.11.10

全リージョン

すべての DataWorks ユーザー

なし

10月

機能

説明

リリース日

リージョン

スコープ

参考資料

データモデリングにおける EMR Hive コンピュートエンジンのサポート

以下の機能は、[ディメンショナルモデリング] モジュールでサポートされています。[データモデリング]。これらの機能により、データモデリングは MaxCompute と同じモデリング機能を提供できます。

  • モデルは EMR Hive に公開でき、ETL コードフレームワークを生成できます。

  • 既存の EMR Hive テーブルでリバースモデリングを実行できます。

2022.11.25

すべてのリージョン

すべての DataWorks ユーザー

データモデリングにおけるモデルのバージョン管理のサポート

[データモデリング][ディメンショナルモデリング] モジュールでは、次の機能がサポートされています。

  • モデルのバージョン管理がサポートされています。 公開できるのは、送信済みのモデルのみです。

  • モデルのバージョン比較とロールバックがサポートされています。

2022.11.25

すべてのリージョン

すべての DataWorks ユーザー

コンピューティングエンジンにテーブルをマテリアライズする

DataService Studio の API 詳細ページでの、ドメイン名に基づいて生成された API 呼び出しアドレスの表示

インターネット ドメイン名、VPC ドメイン名、および独立ドメイン名に基づいて API 用に個別に生成された呼び出しアドレスは、API の詳細ページに表示できます。ビジネス要件に基づいて API を呼び出すアドレスを選択できます。

2022.10.21

すべてのリージョン

すべての DataWorks ユーザー

API の詳細を表示する

データマップの系統機能のスペックアップ

データマップの系統機能がスペックアップされ、データ系統分析におけるユーザーエクスペリエンスが向上しました。系統詳細タブでは、次の操作を実行できます。

  • テーブルの上位テーブルと下位テーブル、およびテーブルフィールドの上位フィールドと下位フィールドを表示します。

  • テーブルのデータソースと、テーブルデータのフロー先を表示します。

  • テーブルの必要なレベルの下位テーブルの影響分析を実行します。

2022.10.21

すべてのリージョン

すべての DataWorks ユーザー

テーブルの詳細を表示する

Data Governance Center の研究開発ディメンションでの新しいチェック項目のサポート

Data Governance Center の研究開発ディメンションに、以下のタイプのチェック項目が追加されました。

  • JOIN 条件での型の整合性をチェックする

  • 特定のアセットの使用を禁止する

  • 同じ名前の UDF の使用をチェックする

  • 開発環境でのデータ書き込みの制限をチェックする

以下の機能が提供されます。

  • チェック機能を管理できます。

    Data Governance Center の [設定] タブで新しいチェック項目を有効化および設定し、[ナレッジ] タブでチェック項目の使用状況の詳細を表示できます。

  • DataStudio でタスクがコミットおよびデプロイされるときに、研究開発ディメンションでのプロアクティブなデータガバナンスがサポートされます。

2022.10.20

すべてのリージョン

すべての DataWorks ユーザー

チェック項目を設定する

基本モードのワークスペースでの DataStudio のコードレビューのサポート

基本モードのワークスペースで強制コードレビュー機能が有効になっている場合、ノードのコードは、コードレビューに合格した後でのみ本番環境で有効になります。

2022.9.22

すべてのリージョン

すべての DataWorks ユーザー

コードレビュー

8月

機能

説明

リリース日

リージョン

範囲

参照

オペレーションセンターでのワークフロー視点からのタスク管理

オペレーションセンターでは、ワークフロー視点からタスクのステータスを表示し、タスクの再実行、フリーズ、終了などの操作を実行できます。

2022.8.22

全リージョン

すべての DataWorks ユーザー

詳細については、「自動トリガーされたタスクインスタンスを表示する」をご参照ください。

DataService Studio での MaxCompute データソース指向のクエリ高速化

DataService Studio では、高速化ソリューションを使用してオンライン API を作成することにより、MaxCompute からデータをエクスポートすることなく、MaxCompute データのクエリを高速化できます。これにより、クエリの性能と効率が向上し、オンラインクエリの要件が満たされます。次の高速化ソリューションが提供されています。

  • Hologres 外部テーブルに基づく高速化

  • MaxCompute Query Acceleration (MCQA) 機能に基づく高速化

2022.8.17

中国 (上海) と中国 (深圳)

すべての DataWorks ユーザー

詳細については、「API ベースのデータクエリの高速化ソリューション」をご参照ください。

DataService Studio での API 呼び出しリンクのインテリジェントな診断と分析

DataService Studio では、API 呼び出しログを分析できます。ログ分析機能を使用して、単一の API 呼び出しリクエストのリンクを分析できます。 API 呼び出しリクエストが失敗した場合、この機能を使用してできるだけ早く問題をトラブルシューティングし、診断結果と提案を取得できます。

2022.8.7

全リージョン

DataWorks ユーザー

詳細については、「API 呼び出しログの表示と分析 (パブリックプレビュー)」をご参照ください。

データマップでのプロジェクトレベルおよびテーブルレベルでのきめ細かい権限管理

データマップでは、さまざまなポリシーを構成して、さまざまな粒度のメタデータに対する権限を管理できます。

  • 他の MaxCompute プロジェクトのメンバーが現在の MaxCompute プロジェクトのメタデータを表示できるようにするかどうかを決定できます。

  • MaxCompute プロジェクトのメンバーではないユーザー、テーブルオーナーではないユーザー、およびワークスペース管理者がテーブルメタデータを表示できるようにするかどうかを決定できます。

2022.8.5

全リージョン

DataWorks ユーザー

詳細については、「付録: データマップでの権限管理の概要」をご参照ください。

Data Integration でコードレス UI を使用してバッチ同期タスクを作成し、Dameng データベースとの間でデータを同期するためのサポート

Data Integration では、コードレス UI を使用してバッチ同期タスクを作成し、Dameng データベースとの間でデータを同期できます。コードレス UI は、コードエディタよりも便利です。

2022.8.2

全リージョン

DataWorks ユーザー

詳細については、「コードレス UI を使用してバッチ同期タスクを構成する」をご参照ください。

7月

機能

説明

リリース日

リージョン

スコープ

参照資料

データモデリングでのディメンションモデリングのサポート

データモデリングでは、次の機能がサポートされています。

  • テンプレート設計中に、既存の Hologres テーブルまたはビューのフィールドとパーティション情報をモデルのフィールドとして参照できます。

  • テンプレート設計中に、表示名が空、または説明が空のフィールドに対して、ワンクリックで入力できます。

    ほとんどの場合、物理テーブルにはフィールドの説明があります。フィールドに表示名が指定されていない場合は、この機能を使用してフィールドに表示名をすばやく指定し、モデリング効率を向上させることができます。

  • モデルの ETL 開発効率を向上させるために、テンプレート開発プロセスで DataStudio のノードを作成したり、既存のノードを関連付けたりできます。

2022.7.29

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)、シンガポール、中国 East 2 Finance、中国 South 1 Finance、中国 North 2 Ali Gov、ドイツ (フランクフルト)、米国 (シリコンバレー)

すべての DataWorks ユーザー

データモデリングで関連付けられたフィールドに関する情報の表示のサポート

関連付けられたフィールドに関する情報を表示するには、次の操作を実行できます。派生メトリックまたはアトミックメトリックの構成タブに移動します。右側のナビゲーションウィンドウの [関連付けられたテーブル] をクリックして、現在のメトリックに関連付けられているフィールドの名前を表示します。また、関連付けられたフィールドが属するテーブルの詳細ページに移動して、関連付けを管理することもできます。

2022.7.29

すべての DataWorks ユーザー

詳細については、「派生メトリック」をご参照ください。

データモデリングにおけるテーブルと派生メトリックの命名規則チェッカーの構成のサポート

データ層のチェッカーを構成して、命名規則を定義し、データ層のテーブルと派生メトリックの命名形式を統一できます。テーブルと派生メトリックを設計する際に、チェッカーはエンティティ名を制約および検証して、開発プロセス全体で命名のコンプライアンスを向上させることができます。

チェッカーで定義されたルールの構成:

  • 強度タイプ: データ層のチェッカーで定義されたルールの [強度タイプ] パラメーターを [強いルール] に設定すると、データ層でテーブルまたは派生メトリックを作成するときに、チェッカーを選択してテーブルまたは派生メトリックの名前を生成し、強制チェックを実行できます。データ層のチェッカーで定義されたルールの [強度タイプ] パラメーターを [弱いルール] に設定すると、データ層でテーブルまたは派生メトリックを作成するときに、チェッカーを選択してテーブルまたは派生メトリックの名前を生成できます。

  • ルール定義: 命名規則。さまざまな要因に基づいて、名前の組織の順序と構成を構成できます。

2022.7.29

すべての DataWorks ユーザー

詳細については、「データ層のチェッカーを構成して使用する」をご参照ください。

データ分析で異なるコンピュートエンジンタイプのタスクによって使用される排他的リソースグループの構成のサポート

Alibaba Cloud アカウントを使用して、データ分析の [システム管理] ページで、異なるコンピュートエンジンタイプのタスクによって使用される排他的リソースグループを構成できます。特定の排他的リソースグループで SQL クエリを実行できます。

2022.7.29

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、ドイツ (フランクフルト)

すべての DataWorks ユーザー

詳細については、「システム管理」をご参照ください。

PostgreSQL データベースのデータ同期のサポート

PostgreSQL データベースのデータ同期がサポートされています。.crt ファイルと .key ファイルに基づく 2 要素認証は、SSL 認証が実行される際にサポートされます。

2022.7.26

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)、日本 (東京)、シンガポール、マレーシア (クアラルンプール)、インドネシア (ジャカルタ)、ドイツ (フランクフルト)、英国 (ロンドン)、米国 (シリコンバレー)、米国 (バージニア)、UAE (ドバイ)

すべての DataWorks ユーザー

詳細については、「Data Integration」をご参照ください。

EMR DataLake クラスタのサポート

EMR DataLake クラスタは、DataWorks でコンピュートエンジンとして使用できます。EMR DataLake コンピュートエンジンに基づいて動作する次のフルライフサイクル機能を実装できます。データ同期、データモデリング、データ開発とスケジューリング、データ品質監視、データマップ、データセキュリティ、データ分析 (関連タスクは排他的リソースグループで実行する必要があります)、およびデータサービス。

2022.7.8

中国 (成都)、中国 (張家口)、中国 (深圳)、中国 (北京)、中国 (上海)、中国 (杭州)、中国 (香港)、日本 (東京)、ドイツ (フランクフルト)、米国 (バージニア)、米国 (シリコンバレー)、インドネシア (ジャカルタ)、英国 (ロンドン)、シンガポール、マレーシア (クアラルンプール)、UAE (ドバイ)

すべての DataWorks ユーザー

詳細については、「DataWorks での EMR ノードの開発に関する使用上の注意」をご参照ください。

DataStudio のインテリジェントコードエディタを使用した、視覚化された方法でのフィールド挿入とテーブルの権限の検証のサポート

  • コード内のテーブルフィールドのクエリは、インテリジェントコードエディタによって自動的に識別できます。テーブル名の上にポインターを移動し、クエリするフィールドを選択して、選択を確認できます。フィールド名はコードに自動的に挿入されます。

  • テーブルの権限は、インテリジェントコードエディタによって検証できます。プロンプトに従って、テーブルの権限をリクエストできます。

2022.7.2

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)

すべての DataWorks ユーザー

詳細については、「DataStudio」をご参照ください。

6月

機能

説明

リリース日

リージョン

スコープ

リファレンス

データガバナンスセンターのサポート

データガバナンスセンターが利用可能になり、以下の機能を提供します。

  • ストレージ、コンピューティング、開発、品質、セキュリティの各ディメンションからの定量的評価モデルに基づいて、ガバナンス結果のヘルススコアを計算し、さまざまな種類のデータガバナンス問題を特定して防止します。

  • 単一タスクのコストを見積もり、タスクで消費されるリソースの詳細とリソース消費の全体的な傾向を表示できます。 これにより、リソース使用量を最適化し、さまざまな種類のリソースのコストを削減できます。

説明
  • データガバナンスセンターは 2022 年 7 月 5 日から利用可能になり、1 か月の試用期間が提供されます。

  • 2022 年 8 月 5 日から、データガバナンスセンターのすべての機能が DataWorks Enterprise Edition で利用可能になります。

2022.6.27

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (深圳)、中国 (成都)、シンガポール、米国 (シリコンバレー)

すべての DataWorks ユーザー

詳細については、「データガバナンスセンターの概要」をご参照ください。

データガバナンスセンターでのタスクの全体像のサポート

タスクの全体像は、[タスク 360] ページで提供されます。 このページでは、タスクで特定されたガバナンスの問題、タスクの操作レコード、タスクの影響を受けるベースライン、タスク実行情報など、タスクに関する以下の情報を表示できます。 この情報は、タスクでデータガバナンス操作を実行するのに役立ちます。

2022.6.24

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (深圳)、中国 (成都)、シンガポール、米国 (シリコンバレー)

すべての DataWorks ユーザー

詳細については、「タスクの全体像を取得する」をご参照ください。

データモデリングでのビューの検索と作成のサポート

  • モデル設計中に、既存のビューフィールドとパーティション情報をモデルのフィールドとして参照できます。

  • モデルが設計された後、モデルをビューにマテリアライズできます。

2022.6.22

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)、シンガポール、米国 (シリコンバレー)、ドイツ (フランクフルト)、中国東部 2 金融、中国南部 1 金融、中国北部 2 Ali Gov 1

すべての DataWorks ユーザー

詳細については、「テーブルをコンピューティングエンジンにマテリアライズする」をご参照ください。

データモデリングでのテーブル名キーワードに基づくモデル生成のサポート

リバースモデリング機能を使用して、テーブル名キーワードのあいまい一致に基づいて論理モデルを生成できます。

2022.6.19

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)、シンガポール、米国 (シリコンバレー)、ドイツ (フランクフルト)、中国東部 2 金融、中国南部 1 金融、中国北部 2 Ali Gov 1

すべての DataWorks ユーザー

詳細については、「物理テーブルでリバースモデリングを実行する」をご参照ください。

承認センターでのデータ同期タスクで実行される操作の管理のサポート

データ転送中のデータのセキュリティを確保するために、承認センターでデータ同期タスクのリクエスト処理ポリシーを設定できます。 ソースとデスティネーションの組み合わせを使用して、操作リクエストを処理する必要があるデータ同期タスクを指定できます。 たとえば、データ同期タスクが保存されると、関連するリクエスト処理手順がトリガーされます。 このようにして、データ同期プロセスを柔軟に管理できます。

2022.6.15

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)、シンガポール、インドネシア (ジャカルタ)、マレーシア (クアラルンプール)、米国 (シリコンバレー)、米国 (バージニア)、ドイツ (フランクフルト)

すべての DataWorks ユーザー

詳細については、「データ同期タスクのリクエスト処理ポリシー」をご参照ください。

データセキュリティガードでの機密データのリネージグラフのサポート

機密データのリネージグラフ機能がサポートされています。 この機能は、以下のサブ機能をサポートしています。

  • データの生成情報に基づいて、データ内の機密フィールド間のリネージを解析できます。 同じ機密フィールドタイプを持つ機密フィールド間のリネージに基づいて、識別結果を広めることができます。 これにより、機密データ識別の効率が大幅に向上します。

  • 機密フィールド間のリネージに基づいて、機密データのリネージグラフを描画できます。 リネージグラフは、機密データのソースとデスティネーションを理解するのに役立ちます。

説明

この機能は、DataWorks Enterprise Edition でのみ使用できます。

2022.6.14

中国 (杭州) と中国 (上海)

すべての DataWorks ユーザー

詳細については、「データリネージ」をご参照ください。

データセキュリティガードでのフィールド間の異常なリネージの分析のサポート

異常なリネージ分析機能がサポートされています。 この機能は、以下の機能を提供します。

  • フィールドのリネージに基づいて、機密フィールド間の異常な関連付けを分析します。 このようにして、ユーザーは文字を連結または分解することで機密データ識別と機密データ使用監査をバイパスすることはできません。

  • クエリ対象のフィールドに関連付けられているが、クエリ対象のフィールドとは異なる機密フィールドタイプを持つフィールドを識別するのに役立ちます。

2022.6.14

中国 (杭州) と中国 (上海)

すべての DataWorks ユーザー

詳細については、「データリネージ」をご参照ください。

5月

機能

説明

リリース日

リージョン

スコープ

参照資料

リスク識別ルール管理機能の新バージョン

リスク識別ルール管理機能の新バージョンがリリースされました。新バージョンの機能は、組み込みのリスク識別シナリオを提供します。データのカテゴリ、感度レベル、操作方法、ユーザー権限など、さまざまなディメンションからのリスク識別がサポートされています。誤検知アラートを防ぐために、アラートイベントの集約度に基づくアラート判定がサポートされています。高、中、低レベルのリスクに対するきめ細かい管理がサポートされています。これにより、企業内のさまざまなデータリスクを全体的に識別できます。

説明
  • リスク識別ルール管理機能は、DataWorks Professional Edition 以降のエディションでのみ使用できます。

  • リスク識別ルール管理機能の旧バージョンは、2022年6月30日以降はサポートされなくなります。旧バージョンがオフラインになると、システムは旧バージョンを使用して作成されたすべての識別ルールと識別されたリスクデータをクリアします。必要な識別ルールと識別されたリスクデータをできるだけ早くエクスポートすることをお勧めします。

  • 新バージョンを使用するには、新バージョンに切り替えて、ビジネス要件に基づいて識別ルールを作成する必要があります。

2022.5.16

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、中国 (香港)

すべての DataWorks ユーザー

詳細については、「リスク識別ルール管理 (新バージョン)」をご参照ください。

4月

機能

説明

リリース日

リージョン

スコープ

参照資料

DataStudio ページの機能と DataStudio ページのノードのステータスの表示パターンの最適化

  • [ノードを作成] した後、最近使用されたノードタイプを表示できます。 使用するノードタイプを直接選択できます。

  • [お気に入り] 機能が提供されています。 頻繁に使用するノードをお気に入りに追加できます。 これにより、ノードを効率的に変更したり、他のユーザーと共同でノードを変更したりできます。

  • スケジュールされたワークフローペインのノードのステータスの表示パターンが最適化されました。 コミットまたはデプロイされていないノードの左側に、[コミット] アイコンと [デプロイ] アイコンが表示されます。 これにより、ノードをすばやくコミットまたはデプロイできます。

2022.4.7

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深セン)、中国 (成都)、中国 (香港)

すべての DataWorks ユーザー

詳細については、「DataStudio ページの機能」をご参照ください。

Data Quality でのルールリスト機能と複数の監視ルールの管理のサポート

ルールリスト機能がサポートされており、次の機能を提供します。

  • 現在のワークスペースで作成された監視ルールをリストに表示できます。 複数の監視ルールを同時に有効化、無効化、およびサブスクライブしたり、複数の監視ルールを自動トリガーされたタスクに同時に関連付けたりできます。 また、ビジネス要件に基づいて監視ルールの強度を変更することもできます。

  • [ルールテンプレート] に基づいて複数のテーブルの監視ルールを同時に作成し、複数の監視ルールを一元的に効率的に管理して、企業のさまざまな種類のデータ品質の問題を解決できます。

2022.4.11

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深セン)、中国 (成都)、中国 (香港)

すべての DataWorks ユーザー

詳細については、「Data Quality での監視ルールの設定手順」をご参照ください。

オペレーションセンターのインテリジェントベースライン機能における、より柔軟なベースラインのアラート設定のサポート

インテリジェントベースライン機能は、以下の点で最適化されています。

  • ベースライン、ベースラインインスタンス、およびイベントは、スマートベースラインページに表示されます。 スマートベースラインページの関連タブでオブジェクトを管理できます。

  • ベースラインごとに、ショートメッセージ、メール、電話番号などのアラート通知方法を設定できます。 また、アラートルールを勤怠表に関連付けることもできます。 これにより、所有者の頻繁な変更によって引き起こされる複雑な操作が回避されます。

2022.4.26

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深セン)、中国 (成都)、中国 (香港)

すべての DataWorks ユーザー

詳細については、「インテリジェントベースラインの概要」をご参照ください。

3月

機能

説明

リリース日

リージョン

スコープ

参照資料

デプロイ ページでのワークスペースをまたがるオブジェクトのデプロイメントと、デプロイ操作の最適化された管理のサポート

ワークスペース内のタスク、リソース、関数などのオブジェクトは、別のワークスペースにデプロイできます。

2022.3.2

すべてのリージョン

デプロイ操作を厳密に制御する必要があるユーザー (金融セクターや公共サービスセクターのユーザーなど)

ワークスペース間のデプロイ

ActionTrail と データ分析 の連携、および ActionTrail による データ分析 における操作レコードのモニタリング

DataAnalysis は ActionTrail と統合されており、以下のタイプの操作レコードを ActionTrail で監視できます。

  • MaxCompute SQL 文を実行するための操作レコード

  • SQL 実行結果をダウンロードするための操作レコード

  • ワークブックをダウンロードするための操作レコード

2022.3.20

すべてのリージョン

すべての DataWorks ユーザー

Data Governance Center のチェック項目とガバナンス項目のランキング機能の最適化

ランキング機能は、以下の点で最適化されています。

  • ガバナンス項目はロールでフィルタリングできます。

  • [ガバナンス項目][チェック項目] は、さまざまなディメンションでソートできます。

  • ワークスペース内のすべてのメンバーのチェック項目とガバナンス項目を表示できます。

  • ガバナンス項目はリストで表示されます。ガバナンス項目の詳細は表示できます。

  • MaxCompute リソースのリソース使用量と使用状況の詳細の履歴トレンドチャートが表示されます。

2022.3.21

すべてのリージョン

Data Governance Center の招待プレビューに参加するユーザー

データガバナンスの結果を表示する

Data Integration における同期タスクの設定最適化

データ統合専用リソースグループで [リアルタイム同期タスクを実行して MaxCompute にデータを同期する] 場合、または [リアルタイム同期タスクを実行して Hologres にデータを同期する] 場合、1,000 個を超えるテーブルを同期できます。 これにより、データ同期の効率が向上します。

2022.3.25

すべてのリージョン

Software as a Service (SaaS) プラットフォームのユーザーや金融セクターのユーザーなど、大量のデータを同期する必要があるユーザー

PostgreSQL 環境を準備する

2021

12月

機能

説明

リリース日

リージョン

参照資料

Data Quality でルールテンプレートに基づいて複数のテーブルのモニタリングルールを同時に構成するためのサポート

ルールテンプレートを選択して、複数のテーブルのモニタリングルールを同時に構成できます。 これにより、構成が簡素化されます。

  • テーブルレベルのルールテンプレートを選択して、複数のテーブルのモニタリングルールを同時に構成できます。

  • フィールドレベルのルールテンプレートを選択して、複数のフィールドのモニタリングルールを同時に構成できます。

2021.12.14

全リージョン

詳細については、「テンプレートに基づいて複数のテーブルのモニタリングルールを構成する」をご参照ください。

Data Governance Center のリソース使用量分析機能のサポート

リソース使用量分析機能は、DataWorks Data Governance Center によって提供されます。 この機能を使用すると、[MaxCompute ストレージリソース消費量][MaxCompute 計算リソース消費量][DataWorks タスクスケジューリングのリソース消費量][DataWorks バッチ同期の Resource 消費量]というディメンションで、全体的なリソース消費量、リソース消費量の変更、およびリソース消費量の details を表示できます。

2021.12.9

全リージョン

詳細については、「リソースタイプの観点からのデータピボット」をご参照ください。

11月

機能

説明

リリース日

リージョン

参照資料

DataStudio のリソースグループオーケストレーション機能のサポート

リソースグループオーケストレーション機能がサポートされています。 この機能を使用すると、ワークフロー内の複数のノードのスケジューリングのリソースグループを同時に変更できます。 ワークスペースにスケジューリング用の複数のリソースグループが存在する場合、ビジネス要件に基づいてワークスペース内のノードのスケジューリングのリソースグループを変更できます。 これにより、適切なリソース使用が促進されます。

2021.11.30

全リージョン

詳細については、「ノードのスケジューリングのリソースグループを変更する」をご参照ください。

DataStudio のバッチ操作機能のサポート

複数の DataWorks オブジェクトに対して同時に操作を実行できます。 DataWorks では、複数のノード、リソース、または関数のオーナーなどの構成を同時に変更できます。 変更後、ノード、リソース、または関数を本番環境にコミットおよびデプロイして、変更を有効にすることができます。

2021.11.11

全リージョン

詳細については、「複数のDataWorksオブジェクトに対して同時に操作を実行する」をご参照ください。

10月

機能

説明

リリース日

リージョン

参照資料

データモデリングにおけるリバースモデリングおよび命名辞書機能のサポート

  • 命名辞書機能がサポートされています。 命名辞書は、ビジネス用語、物理テーブル、およびフィールドのルートと形態素、およびルートと形態素の標準化された翻訳を管理するために使用されます。

  • リバースモデリング機能がサポートされています。 この機能は、他のモデリングツールを使用して生成されたモデルをDataWorks ディメンショナルモデリングに適用するために使用されます。

2021.10.30

これらの機能は、中国 (北京)、中国 (上海)、中国 (杭州)、中国 (深圳)、中国 (張家口)、中国 (成都)、シンガポール、米国 (シリコンバレー)、ドイツ (フランクフルト)、中国 (香港)、中国東部 2 金融、中国南部 1 金融の各リージョンでパブリックプレビュー中です。

DataStudio のコード検索機能のサポート

コード検索機能がサポートされています。 この機能を使用すると、キーワードでノードのコード内のコードスニペットをクエリできます。 検索結果には、各コードスニペットの詳細と、コードにコードスニペットが含まれるノードが表示されます。 この機能を使用して、テーブルの変更の原因となったノードを追跡できます。

2021.10.27

全リージョン

詳細については、「コード検索」をご参照ください。

9月

機能

説明

リリース日

リージョン

参照資料

データマップでの DataService Studio API の表示のサポート

ウィザード API、スクリプト API、登録 API などの DataService Studio API アセットをデータマップに表示できます。 グローバルな観点から、またはビジネスシナリオに基づいて API を検索および管理できます。 データマップでは、API のグローバル検索、人気のある API の統計の表示、API の詳細ページでの API 情報の表示、各データソースタイプに属する API 分布の表示など、API に対して特定の操作を実行できます。

2021.09.30

全リージョン

最新バージョンの Data Governance Center のリリース

データストレージ、タスクコンピューティング、コード開発、データ品質、およびセキュリティの各ディメンションで処理する必要がある問題は、Data Governance Center によってグローバル、ワークスペース、および個人の観点から検出できます。 Data Governance Center は、データガバナンスの有効性を評価するためのヘルススコアを提供し、ガバナンスレポートとガバナンス問題のランキングを提供することで、ガバナンス結果を視覚化します。 これにより、効率的な方法で問題のトラブルシューティングを行い、ガバナンス目標を達成できます。

2021.09.12

最新バージョンの Data Governance Center は、中国 (上海)、中国 (杭州)、中国 (北京)、中国 (深圳) リージョンでパブリックプレビュー中です。

詳細については、「Data Governance Center の概要」をご参照ください。

8月

機能

説明

リリース日

リージョン

参照資料

中国 (杭州) および中国 (上海) リージョンにおける DataService Studio 専用のリソースグループ

DataService Studio 専用のリソースグループは、中国 (杭州) および中国 (上海) リージョンでご利用いただけます。 DataService Studio で API を呼び出すときに高いクエリ/秒 (QPS) とサービスレベル契約 (SLA) の保証が必要な場合は、DataService Studio 専用のリソースグループを使用して API 呼び出しの成功を確実にすることができます。 DataService Studio 専用のリソースグループは、同時実行性が高く、頻繁な API 呼び出しの要件を満たし、できるだけ早く応答が返されるようにするのに役立ちます。

2021.08.06

中国 (杭州) および中国 (上海)

詳細については、「DataService Studio 専用のリソースグループ」をご参照ください。

DataWorks Migration Assistant の商用リリース

Migration Assistant を使用すると、異なる DataWorks エディション、Alibaba Cloud アカウント、リージョン、およびワークスペース間でデータ開発オブジェクトを移行できます。 ワークスペース内のデータオブジェクト (自動トリガータスク、手動トリガータスク、リソース、関数、データソース、テーブルメタデータ、アドホッククエリ、SQL スクリプトテンプレートなど) をエクスポートできます。 また、完全エクスポートタスク、増分エクスポートタスク、またはカスタムエクスポートタスクを作成して、ビジネス要件に基づいて DataWorks 内のデータオブジェクトをエクスポートすることもできます。

2021.08.01

全リージョン

詳細については、「概要」をご参照ください。

7月

機能

説明

リリース日

リージョン

参照資料

Data Governance Center の承認センターのリリース

DataWorks 承認センター機能がリリースされました。 この機能を使用して、データの権限を管理し、高リスクの操作を管理できます。 また、この機能を使用して、リクエストの範囲を指定し、リクエスト処理手順をカスタマイズして、さまざまなコンプライアンスシナリオでの企業のリクエスト処理要件を満たすこともできます。

2021.07.16

全リージョン

詳細については、「承認センターの概要」をご参照ください。

EMR ゲートウェイノードへのタスク発行のサポート

[詳細設定] タブのパラメータを構成して、EMR ゲートウェイノードにタスクを発行し、負荷を分散させることができます。 今後、ワークスペースレベルのタスクをノードに発行できます。

2021.07

全リージョン

詳細については、「EMR Hive ノードを作成する」をご参照ください。

6月

機能

説明

リリース日

リージョン

参照資料

EMR Spark Streaming ノードの開発と運用保守

EMR Spark Streaming および EMR Streaming SQL ノードは、DataWorks でサポートされています。

EMR Spark Streaming または EMR Streaming SQL ノードを開発し、ノードをテストしてから、本番環境にコミットできます。 ノードの実行に失敗した場合、ノードを再実行できます。 また、ノードのステータスと詳細の表示、ノードの開始、終了、またはアンデプロイ、ノードの監視、ノードでエラーが発生した場合の通知の送信などの操作を実行することもできます。

2021.06

全リージョン

詳細については、「EMR Spark Streaming ノードを作成する」をご参照ください。

EMR データ開発タスクの DataWorks への移行

ワークフロー (ノードとスケジューリング設定)、手動で実行されたジョブ、リソース、およびデータソースは、DataWorks の Migration Assistant を使用して EMR クラスタから DataWorks ワークスペースに移行できます。 DataWorks コンソールの Migration Assistant ページに移動して、移行の進捗状況、結果、およびレポートを表示できます。

2021.06

全リージョン

詳細については、「EMR プロジェクトを DataWorks に移行する」をご参照ください。

オペレーションセンターにおけるリソース運用保守機能のサポート

オペレーションセンターでは、リソース運用保守機能がサポートされています。 この機能は、ノードの実行に使用されるリソースグループの使用状況を監視するのに役立ちます。

2021.06.09

全リージョン

詳細については、「リソース運用保守」をご参照ください。

MaxCompute データソースベースの API カプセル化

MaxCompute テーブルにアクセスして、DataService Studio で API をカプセル化するために使用できます。 この機能はカナリアリリースされています。 このような API は、MaxCompute の MCQA 機能に基づいてデータをクエリします。 これにより、迅速かつ効率的な API 呼び出しを実現できます。 MaxCompute タスクは、DataService Studio 専用のリソースグループでのみ実行できます。

2021.06

全リージョン

なし

DataWorks でのアラート連絡先の構成

DataWorks コンソールの [アラート連絡先] ページで、RAM ユーザーまたは RAM ロールをアラート連絡先として追加できます。 タスクの実行中にエラーが発生した場合、DataWorks は指定したアラート連絡先にアラート通知を送信します。 これにより、例外をできるだけ早く処理できます。

2021.06

全リージョン

詳細については、「アラート連絡先を構成して表示する」をご参照ください。

5月

機能

説明

リリース日

リージョン

参照資料

AnalyticDB for MySQL V3.0 へのリアルタイムデータ同期

DataWorks でリアルタイム同期タスクを作成して、MySQL、OceanBase、または PolarDB データベースから AnalyticDB for MySQL データソースにデータを同期できます。 リアルタイム同期タスクは、データベースから完全データを一度に同期し、次にデータベースから AnalyticDB for MySQL V3.0 データソースに増分データをリアルタイムで同期します。 さらに、ソースに追加した列は、リアルタイム同期の際に宛先に自動的に追加されます。

2021.05.25

全リージョン

詳細については、「リソースの計画と構成」をご参照ください。

Open Message のパブリックプレビュー

Open Message サービスは DataWorks でサポートされています。 DataWorks Open Message でメッセージサブスクリプション機能を有効にできます。 Open Message サービスはパブリックレビュー中です。 DataWorks Enterprise Edition のユーザーのみがパブリックプレビューに参加できます。 DataWorks サービスが Enterprise Edition の場合、Open Message サービスを試用ベースで使用でき、パブリックプレビュー中は追加料金は発生しません。 Open Message を使用して、DataWorks のメタデータとタスク変更イベントを取得できます。 これにより、DataWorks をシステムと緊密に統合できます。

2021.05.21

中国 (北京)、中国 (杭州)、中国 (深圳)、中国 (上海)

詳細については、「OpenEvent の概要」をご参照ください。

毎年特定の日の特定の時点または月の最終日の特定の時点にタスクを実行するようにスケジューリングするためのサポート

毎年特定の日の特定の時点または月の最終日の特定の時点にタスクを実行するようにスケジューリングできます。 これにより、毎年、四半期、または月の最終日の特定の時点にタスクを実行するようにスケジューリングできます。 DataWorks では、[分][時][日][週][月]、または [年] 単位でタスクをスケジューリングできます。

2021.05.19

全リージョン

詳細については、「時間プロパティを構成する」をご参照ください。

ClickHouse データソースのサポート

ClickHouse データソースは DataWorks でサポートされています。 ClickHouse データソースに関連するデータ同期、データ開発、タスクスケジューリング、タスク運用保守などの ETL 操作が許可され、ETL 操作の管理機能が提供されます。

  • DataWorks では、EMR インスタンスモードまたは JDBC 接続文字列モードで ClickHouse クラスタをワークスペースに関連付けることができます。 また、JDBC 接続文字列モードで ClickHouse データソースを追加することもできます。

  • DataWorks Data Integration では、データ同期タスクを作成して、ClickHouse からデータを読み取ったり、ClickHouse にデータを書き込んだりできます。

  • DataWorks では、ClickHouse SQL ノードを作成できます。 ClickHouse SQL ノードを使用すると、分散 SQL クエリエンジンを使用して構造化データを処理できます。 これにより、ジョブの実行効率が向上します。

2021.05.15

全リージョン

4月

機能

説明

リリース日

リージョン

参照資料

AnalyticDB for MySQL V3.0 へのリアルタイムデータ同期

Data Integration でリアルタイム同期タスクを作成して、複数のテーブルから AnalyticDB for MySQL V3.0 データソースにデータをリアルタイムで同期できます。 DDL 文を実行してソーステーブルに追加した列は、リアルタイム同期の際に宛先テーブルに自動的に追加されます。

2021.4.20

全リージョン

詳細については、「AnalyticDB for MySQL V3.0 にデータを同期するためのリアルタイム同期ソリューションを作成する」をご参照ください。

DataStudio の FTP チェックノードのサポート

DataStudio で FTP チェックノードを作成して、FTP に基づいて特定のファイルが存在するかどうかを定期的に検出できます。 FTP チェックノードがファイルが存在することを検出すると、スケジューリングシステムは FTP チェックノードの子孫ノードを実行します。 それ以外の場合、FTP チェックノードは構成された検出間隔に基づいてファイルを検出します。 FTP チェックノードは、検出を停止する条件が満たされるまで再試行を停止します。 ほとんどの場合、FTP チェックノードは DataWorks スケジューリングシステムと外部スケジューリングシステム間の通信に使用されます。

2021.4.15

中国 (北京)、中国 (上海)、中国 (杭州)、中国 (深圳)、中国 (張家口)、中国 (成都)、シンガポール

詳細については、「FTP チェックノードを作成する」をご参照ください。

3月

機能

説明

リリース日

リージョン

参照資料

DataWorks Enterprise Edition のワークスペースにおけるカスタムロールのサポート

DataWorks Enterprise Edition では、カスタムロールがサポートされています。 ビジネス要件に基づいてロールに権限を付与できます。

2021.3.22

全リージョン

詳細については、「ワークスペースレベルのサービスに対する権限を管理する」をご参照ください。

Data Integration における Kerberos 認証

Data Integration では、Kerberos 認証がサポートされています。 Hive や Kafka などのデータソースに対して身元認証を実行する場合は、データソースを追加するときに Kerberos 認証の構成に必要なファイルをアップロードします。 これにより、安全な方法でデータソースにアクセスできます。

2021.3.16

全リージョン

詳細については、「Kerberos 認証を構成する」をご参照ください。

最新バージョンのセキュリティセンター

最新バージョンのセキュリティセンターがリリースされました。 セキュリティセンターを使用すると、データと個人のプライバシーを効率的に保護できるセキュリティシステムを構築できます。 セキュリティセンターは、監査などの高リスクシナリオにおけるさまざまなセキュリティ要件を満たすことができます。 セキュリティセンターは、追加の構成を行うことなく使用できます。

2021.03.13

全リージョン

詳細については、「概要」をご参照ください。

オペレーションセンターにおけるノード集約、先祖ノード分析、および子孫ノード分析機能のサポート

ノード集約機能がサポートされています。 この機能を使用すると、ワークスペース、オーナー、優先度など、さまざまなディメンションから有向非循環グラフ (DAG) 内のノードを集約できます。 これにより、指定されたディメンションからのノードの総数を表示できます。 先祖ノード分析および子孫ノード分析機能もサポートされています。 これらの機能を使用すると、特定のノードの先祖ノードと子孫ノードを分析できます。 これにより、ノードの実行をブロックしている先祖ノードをすばやく見つけ、分析結果に基づいてノードの子孫ノードの数を表示し、すべてのノードの実行ステータスを理解できます。

2021.03.10

中国 (深圳)

詳細については、「自動トリガータスクを表示および管理する」をご参照ください。

2月

機能

説明

リリース日

リージョン

参考資料

データディスカバリー機能を使用した複数メタデータクローラーの一括作成

[データディスカバリー] 機能の [データマップ] を使用して、複数のメタデータクローラーを一度に作成できます。 この方法で、テーブルスキーマとテーブル間の関連付けをすばやく表示できます。

2021.02.17

すべてのリージョン

EMR データソースからメタデータを収集する

Migration Assistant を使用した Airflow からのタスク移行

Airflow のタスクは、Migration Assistant を使用して DataWorks に移行できます。

2021.02.16

すべてのリージョン

オープンソースエンジンからタスクをエクスポートする

DataService Studio での API 統計情報の表示のサポート

API 統計情報は、DataService Studio の統計ダッシュボードページと統計詳細ページで表示できます。 DataService Studio の統計ダッシュボードページには、API 統計情報を表示するためのさまざまなチャートと表が用意されています。たとえば、ワークスペース内の API の総数と API 呼び出しの総数を表示できます。これにより、グローバルな視点から API 呼び出しに関する情報を取得できます。 DataService Studio の統計詳細ページでは、モニタリングチャートを表示して、API ゲートウェイの状態コードや DataService Studio のエラーコードなど、特定の API に関する情報を取得できます。

2021.02.16

中国 (北京)

オープン プラットフォーム

DataWorks では [オープン プラットフォーム] サービスが利用可能です。このサービスを使用すると、API のメータリング レポートと指定された日付の呼び出しの詳細を表示できます。

2021.02.13

すべてのリージョン

DataWorks オープン プラットフォーム

1月

機能

説明

リリース日

リージョン

参照

Data Integration での RestAPI データソースのサポート

RestAPI データソースは Data Integration でサポートされています。このようなデータソースは、RESTful API 操作を使用してデータを提供または受信します。Data Integration は、これらのデータソースのデータのバッチ同期をサポートしています。

2021.1.4

すべてのリージョン

RestAPI Reader

2020

12月

機能

説明

リリース日

リージョン

参照資料

Elasticsearch への完全同期と増分同期

データベース内のすべてのテーブルまたは特定のテーブルの完全データと増分データを Elasticsearch に同期できます。

2020.12.30

全リージョン

詳細については、「リアルタイム同期ソリューションを作成して Elasticsearch にデータを同期する」をご参照ください。

9月

機能

説明

リリース日

リージョン

参照資料

Data Integration のリアルタイム同期

Data Integration では、リアルタイム同期機能がサポートされています。この機能を使用すると、ソースデータベースの単一テーブルまたはすべてのテーブルのデータ変更をターゲットデータベースにリアルタイムで同期できます。これにより、ターゲットデータベースのデータは、ソースデータベースのデータとリアルタイムで一致します。同期タスクを作成して、異なるデータソース間で完全データと増分データを同期できます。

2021.4.15

全リージョン

7月

機能

説明

リリース日

リージョン

参照資料

API 操作のパブリックプレビュー

複数のモジュールの API 操作が提供されており、DataWorks を柔軟に使用できます。これらのモジュールには、テナント、メタデータ、DataStudio、オペレーションセンター、Data Quality、DataService Studio が含まれます。

説明

API 操作は、DataWorks Enterprise Edition 以降のエディションでのみ使用できます。

2020.07.16

中国 (杭州)、中国 (上海)、中国 (深圳)、中国 (北京)、中国 (張家口)

詳細については、「DataWorks API 操作の概要」をご参照ください。

Migration Assistant のパブリックプレビュー

ワークスペース内のデータオブジェクト (自動トリガータスク、手動トリガータスク、リソース、関数、データソース、テーブルメタデータ、アドホッククエリ、SQL スクリプトテンプレートなど) をエクスポートできます。また、完全エクスポートタスク、増分エクスポートタスク、またはカスタムエクスポートタスクを作成して、ビジネス要件に基づいて DataWorks 内のデータオブジェクトをエクスポートすることもできます。

2020.07

中国 (杭州)、中国 (上海)、中国 (北京)、中国 (張家口)、中国 (深圳)、中国 (成都)、シンガポール

詳細については、「Migration Assistant」をご参照ください。

DataService Studio のアップグレード

DataService Studio の左側ナビゲーションウィンドウの項目が調整されました。

2020.07.28

  • 関数を作成し、API のフィルターを構成できるのは、DataWorks Enterprise Edition 以降のエディションをアクティブ化し、中国 (上海) リージョンにワークスペースを作成した場合のみです。

  • サービスオーケストレーション機能を使用できるのは、DataWorks Enterprise Edition 以降のエディションをアクティブ化し、中国 (上海) リージョンにワークスペースを作成した場合のみです。

詳細については、「DataService Studio の概要」をご参照ください。

6月

機能

説明

リリース日

リージョン

参照資料

データソースクエリ

データソースクエリ機能がサポートされています。ワークブックを変更するときに、この機能を使用してデータソースからデータを読み取って分析できます。

2020.06.09

中国 (上海)

詳細については、「データを分析する」をご参照ください。

4月

機能

説明

リリース日

リージョン

参照資料

オペレーションセンターでの電話ベースのアラート

アラート通知は、[電話][ショートメッセージ][メール] で送信できます。

重要

電話ベースのアラート機能は、DataWorks Professional Edition 以降のエディションでのみ使用できます。

2020.04.15

全リージョン

詳細については、「カスタムアラートルールを作成する」をご参照ください。