DataWorks:Open Data の管理

Open Data の表示

Open Data 内のパッケージのメタデータとユースケースを理解し、ニーズに合ったものを選択します。

1. DataWorks コンソールにログインします。 左側のナビゲーションウィンドウで、[データガバナンス] > [データマップ] を選択します。 表示されるページで、[データマップに移動] をクリックします。

2. データマップページの左側メニューで、 アイコンをクリックしてデータカタログページに移動します。

3. カタログリストで [DataWorks Open Data] をクリックし、[DataWorks Open Data] ページに移動します。

4. Package List タブに切り替え、目的のパッケージの Details をクリックします。Table List で、メタデータテーブルとその説明を表示できます。

   • MetaData と Examples メタデータの違い：

     パッケージ名	Open Data	ユースケース
     MetaData	テーブルスキーマ、フィールドの説明、データリネージなどのテーブル情報。 タスクの実行ステータスや依存関係などのスケジューリングノードとインスタンス。 ワークスペース、メンバー、プロジェクトなどの管理メタデータ。 Data Quality の詳細やデータガバナンスの詳細などのメタデータ。	データ資産のインベントリ、データリネージ分析、依存関係管理に適しています。
     Examples	メタデータメトリックデータのコレクション。 説明 Examples パッケージは DataWorks が提供しており、メタデータから生成されたサンプルメトリックテーブルのコレクションが含まれています。実際のデータは、特定のビジネス要件に基づいて変更される場合があります。UI に表示されるデータが正となります。	MetaData パッケージの生データと組み合わせることで、リソース使用率分析やタスクの健全性評価などの一般的な分析シナリオを迅速に構築できます。

     重要

     メタデータテーブルのスキーマとフィールドの詳細については、「Open Data テーブルスキーマの詳細」をご参照ください。

5. メタデータテーブルの詳細を確認するには、テーブルの Details をクリックします。テーブル詳細ページで Fields と Description を表示し、Open Data メタデータテーブル間の関係を迅速に理解できます。

Open Data のインストール

ビジネスニーズに基づき、テナント内に関連するデータビューをパッケージとしてインストールできます。このプロセスでは、指定されたワークスペースの MaxCompute コンピュートエンジンにこれらのビューへのアクセスを認可します。

1. Open Data ページに移動します。Package List タブで、対象のパッケージ ([Metadata] または [Examples]) を選択し、Actions 列の Details をクリックします。

2. パッケージページで、使用したいパッケージをインストールします。

   • 初回インストール：パッケージページの右上隅にある Load をクリックします。

   • インストール履歴が存在する場合：パッケージページの Installation History タブで、Load をクリックします。

3. Install DataWorks Metadata ダイアログボックスで、対象のワークスペースと認可する MaxCompute プロジェクトを選択します。

   説明

   • 認可対象の MaxCompute プロジェクトは、対象のワークスペースにバインドされているコンピュートエンジンです。

   • 対象のワークスペースにバインドされている MaxCompute コンピュートエンジンが Installed 状態の場合、再度インストールする必要はありません。

   • 標準モードのワークスペースの場合、開発環境と本番環境の両方で MaxCompute コンピュートエンジンをインストールし、認可することを推奨します。

4. インストールの注意書きを読み、確認チェックボックスを選択してから Confirm Installation をクリックします。インストールが成功すると、Installation History タブで新しいインストール履歴を表示できます。

対象のワークスペースの MaxCompute コンピュートエンジンで他のパッケージのメタデータを使用するには、上記の手順に従ってインストールし、認可します。

Open Data の使用

対象のワークスペースの MaxCompute コンピュートエンジンに Open Data をインストールした後、そのワークスペースのコンピュートエンジンを使用して、Data Studio または DataAnalysis で認可されたメタデータビューに直接アクセスできます。

1. データマップページの左側メニューで、 アイコンをクリックしてデータカタログページに移動します。

2. カタログリストで [MaxCompute] をクリックし、名前にプレフィックス u_meta とリージョン名のサフィックスが付いたパッケージをクリックします。

3. 詳細ページで、Use Now > DataStudio または Use Now > DataAnalysis をクリックして対応するモジュールに移動し、認可されたメタデータビューをクエリして使用します。

   • Data Studio での使用：

     1. Data Studio の上部メニューで、Open Data がインストールされているリージョンとワークスペースに切り替えます。

     2. MaxCompute ノードを作成します。ノード編集ページで、Open Data を使用してタスクを開発できます。

     3. 次のサンプルコードを使用して、インストールが成功したことを確認できます。

        SELECT  dt
                ,COUNT(*) AS database_count
        FROM    u_meta_hangzhou.databases
        GROUP BY dt
        ORDER BY dt ASC
        LIMIT   32
        ;

        重要

        • コードをテストする際は、認可された MaxCompute コンピュートエンジンを使用する必要があります。

        • u_meta_hangzhou を、お使いの MaxCompute データカタログ内のパッケージ名に置き換えてください。パッケージ名には、プレフィックス u_meta とリージョン名のサフィックスが付いています。

   • DataAnalysis での使用：

     1. DataAnalysis の SQL クエリページには、サンプルメタデータ分析スクリプトが用意されており、必要に応じて変更して使用できます。

     2. SQL クエリページの右上隅にある アイコンをクリックします。認可されたワークスペースと、MaxCompute コンピュートエンジンのバインド時に自動作成されたデータソースを選択します。データソース名はコンピュートエンジンと同じです。その後、DataAnalysis で認可されたメタデータに対してクエリを実行できます。

        説明

        サンプルスクリプトを実行する前に、REPLACE_WITH_WORKSPACE_ID パラメーターをクエリしたいワークスペースの ID に置き換えてください。置き換えない場合、エラーが発生します。ワークスペース ID の取得方法については、「ワークスペースの設定」をご参照ください。

Open Data のアンインストール

Open Data を使用する必要がなくなった場合、またはワークスペース内の MaxCompute プロジェクトから認可を取り消したい場合は、対応する Open Data パッケージをアンインストールできます。

1. データマップページの左側メニューで、 アイコンをクリックしてデータカタログページに移動します。

2. カタログリストで [MaxCompute] を選択し、名前にプレフィックス u_meta とリージョン名のサフィックスが付いたパッケージをクリックします。

3. 詳細ページの Accessible Projects タブで、対象のプロジェクトを見つけ、Actions 列の Uninstall をクリックします。表示された Confirm Uninstallation of DataWorks Metadata ダイアログボックスで、アンインストールの注意書きを読み、確認チェックボックスを選択してから Confirm Uninstallation をクリックします。

   重要

   アンインストールすると認可が取り消され、依存するタスクが失敗します。続行する前に、これらのビューに依存するアクティブなタスクがないことを確認してください。