すべてのプロダクト
Search
ドキュメントセンター

DataWorks:DataWorks データソースの新バージョンに関するお知らせ

最終更新日:Jan 11, 2025

DataWorks ユーザー各位

より良いユーザーエクスペリエンスを提供するために、DataWorks開発チームは 2023年 10月 20日 から、DataWorks の以下のタイプの計算エンジンを同じタイプのデータソースに段階的に統合する予定です。MaxCompute、Hologres、AnalyticDB for PostgreSQL、AnalyticDB for MySQL、ClickHouse。また、E-MapReduce(EMR)と Cloudera's Distribution including Apache Hadoop(CDH)の計算エンジンをオープンソースクラスターに統合する予定です。これらの統合は、計算エンジンの統合管理を促進することを目的としています。

計算エンジンのデータソースへの統合

DataWorks の以下のタイプの計算エンジンは、同じタイプのデータソースに統合されます。MaxCompute、Hologres、AnalyticDB for PostgreSQL、AnalyticDB for MySQL、ClickHouse。統合後、上記のタイプの計算エンジンについて、以下の点に注意する必要があります。

  • 計算エンジンの作成: 上記のタイプの計算エンジンをワークスペースに計算エンジンインスタンスとして関連付けるための元のユーザーインターフェース(UI)は使用されなくなります。統合後、上記のタイプのデータソースを計算エンジンとして参照する必要があります。計算エンジンを作成するには、まずデータソースを追加する必要があります。image.png

    説明

    リージョンまたはアカウントを跨いで追加されたデータソース、または AccessKey ペアを使用して追加されたデータソースは、データ開発またはタスクスケジューリングには使用できません。これらのデータソースは、データ同期にのみ使用できます。

    データソースをデータ開発に使用する場合、DataStudio に移動し、データソースを DataStudio に関連付ける必要があります。image.png

  • 関連付けられている計算エンジンの移行: ワークスペースに関連付けられている計算エンジンは、統合管理のために DataWorks コンソールの [datastudio][コンピューティングリソース] ページに移行されます。

  • 計算エンジンの編集: 計算エンジンを直接編集することはできなくなります。計算エンジンを編集するには、計算エンジンとして参照されているデータソースを編集します。

  • 計算エンジンの関連付けの解除: ワークスペース管理者は、ワークスペースから計算エンジンの関連付けを解除できます。この操作によって、参照されているデータソースが DataWorks から削除されることはありません。

計算エンジンのオープンソースクラスターへの統合

DataWorks の EMR および CDH 計算エンジンは、統合管理のためにオープンソースクラスターに統合されます。統合後、上記のタイプの計算エンジンについて、以下の点に注意する必要があります。

  • 計算エンジンの作成: 上記のタイプの計算エンジンをワークスペースに計算エンジンインスタンスとして関連付けるための元の UI は使用されなくなります。統合後、上記のタイプの計算エンジンのいずれかを作成する場合、計算エンジンのタイプのクラスターを登録する必要があります。クラスターが登録された後、データ開発操作を開始できます。

    説明

    リージョンまたはアカウントを跨いで登録されたクラスター、または AccessKey ペアを使用して登録されたクラスターは、データ開発またはタスクスケジューリングには使用できません。これらのクラスターは、データ同期にのみ使用できます。

    image.png

  • 関連付けられている計算エンジンの移行: ワークスペースに関連付けられている計算エンジンは、統合管理のために DataWorks コンソールの [settingcenter][オープンソースクラスター] に移行されます。

  • 計算エンジンの編集: 計算エンジンを直接編集することはできなくなります。計算エンジンを編集するには、計算エンジンのタイプである登録済みクラスターを編集します。

  • 計算エンジンの関連付けの解除: ワークスペース管理者は、ワークスペースから計算エンジンの関連付けを解除できます。この操作によって、登録済みクラスターが DataWorks から削除されることはありません。

権限変更の説明

統合後、高いセキュリティを確保するために、以下の権限変更が適用されます。

  • 認証方法の変更: AccessKey ペアを使用して、ワークスペースにデータソースを追加したり、計算エンジンを関連付けたりすることはできなくなります。既存のデータソースまたは計算エンジンにアクセスするために AccessKey ペアを引き続き使用できます。データソースが追加された、または計算エンジンが関連付けられた Alibaba Cloud アカウントに AccessKey ペアが属していることを確認する必要があります。AccessKey ペアを使用して構成されたデータソースと計算エンジンは、データ開発には使用できません。

  • デフォルトのアクセス ID の変更: タスク所有者または現在のログオンアカウント以外の ID をデータソースまたはクラスターのデフォルトのアクセス ID として指定する場合、使用するアカウントに [administratoraccess] ポリシーがアタッチされていることを確認する必要があります。

    説明

    特定のデータソースまたはクラスターのみがデフォルトのアクセス ID を必要とします。DataWorks コンソールでの要件に基づいて、データソースとクラスターのデフォルトのアクセス ID を指定できます。

  • Alibaba Cloud アカウントを跨いでのデータソースの追加とクラスターの登録: 別の Alibaba Cloud アカウントに属するデータソースを現在の Alibaba Cloud アカウント内のワークスペースに追加したり、クラスターを登録したりする場合、RAM ロールを使用してデータソースまたはクラスターにアクセスする必要があります。

上記の変更についてご質問がある場合は、次の QR コードをスキャンして DataWorks サービス DingTalk グループに参加し、テクニカルサポートにお問い合わせください。

image.png