DataWorks データマップは、エンタープライズデータカタログを管理するためのモジュールです。メタデータの詳細表示、データリネージ、データカテゴリ管理などの機能を提供し、Hologres データの検索、理解、利用を支援します。このトピックでは、データマップで Hologres メタデータコレクターを構成し、関連操作を実行する方法について説明します。
制限事項
データマップは Hologres V1.1 以降でのみサポートされています。ご利用のインスタンスが V1.1 より前のバージョンの場合は、一般的なアップグレード準備エラー を参照してトラブルシューティングを行うか、Hologres DingTalk グループに参加してフィードバックを提供してください。詳細については、「オンラインサポートをさらに利用する方法」をご参照ください。
データマップで Hologres メタデータコレクターを構成した後、データリネージ情報は 1 時間以内に利用可能になります。
データリネージ機能は、以下のリージョンでのみ利用可能です。
中国 (杭州)、中国 (上海)、中国 (北京)、中国 (深セン)、中国 (香港)、シンガポール。
メタデータの収集とアクセス
Hologres データソースからデータマップにメタデータをインポートして、一元管理できます。メタデータが収集されると、データマップで Hologres データソースからのメタデータを検索および表示できます。
データマップページに移動します。
DataWorks コンソールにログインします。上部のナビゲーションバーで、目的のリージョンを選択します。左側のナビゲーションウィンドウで、 を選択します。表示されたページで、[データマップに移動] をクリックします。
- 上部のナビゲーションバーで、[データディスカバリ] をクリックします。
左側のナビゲーションウィンドウで、 を選択します。
[Hologres メタデータクローラー] ページで、[クローラーの作成] をクリックします。
[クローラーの作成] ダイアログボックスで、各ステップのパラメーターを設定します。
基本情報を構成します。
[基本情報] ステップで、必要に応じてパラメーターを設定します。
パラメーター
説明
[クローラー名]
必須。クローラーの名前です。一意の名前を設定する必要があります。
[クローラーの説明]
クローラーの説明です。
[ワークスペース]
メタデータを収集するデータソースのワークスペースです。
[データソースタイプ]
メタデータを収集するデータソースのタイプです。デフォルト値は Hologres であり、変更できません。
[次へ] をクリックします。
Hologres データソースを選択します。
[収集オブジェクトの選択] ステップで、[データソース] ドロップダウンリストからデータソースを選択します。
ご利用のワークスペースにコンピュートエンジンインスタンスとして関連付けられている Hologres インスタンスからのみメタデータを収集できます。利用可能なデータソースがない場合は、[作成] をクリックしてデータソースを作成します。詳細については、「Hologres データソースの追加」をご参照ください。
「[クローラー接続性のテスト]」の横にある「[テスト開始]」をクリックします。「[接続性テストは成功しました]」というメッセージが表示された場合、DataWorks メタデータサービスは Hologres データソースに接続できます。
説明[接続テストに失敗しました] というメッセージが表示された場合は、接続エラーの原因を特定し、問題をトラブルシューティングする必要があります。
[次へ] をクリックします。
実行計画を構成します。
[実行計画の構成] ステップで、実行計画を構成します。
[実行計画] パラメーターの有効な値は、[オンデマンド実行]、[毎月]、[毎週]、[毎日]、および [毎時] です。生成される実行計画は、実行サイクルによって異なります。システムは、指定した実行サイクルに基づいて Hologres データソースからメタデータを収集します。詳細は以下のとおりです。
オンデマンド実行: システムは、ビジネス要件に基づいて Hologres データソースからメタデータを収集します。
毎月: システムは、毎月特定の日の特定の時刻に Hologres データソースからメタデータを 1 回自動的に収集します。
重要特定の月には 29 日、30 日、または 31 日がない場合があります。これらの月では、システムはこれらの日付に Hologres データソースからメタデータを収集しません。月末の数日を選択しないことを推奨します。
次の図は、システムが毎月 1 日、11 日、21 日の 09:00 に Hologres データソースからメタデータを 1 回自動的に収集することを示しています。[日付] および [時刻] パラメーターの値に基づいて、[Cron 式] パラメーターの式が自動的に生成されます。
毎週: システムは、毎週特定の曜日の特定の時刻に Hologres データソースからメタデータを 1 回自動的に収集します。
次の図は、システムが毎週日曜日と月曜日の 03:00 に Hologres データソースからメタデータを 1 回自動的に収集することを示しています。[曜日] および [時刻] パラメーターの値に基づいて、[Cron 式] パラメーターの式が自動的に生成されます。
[時刻] パラメーターが設定されていない場合、システムは毎週特定の曜日の 00:00:00 に Hologres データソースからメタデータを 1 回自動的に収集します。 毎日: システムは、毎日特定の時刻に Hologres データソースからメタデータを 1 回自動的に収集します。
次の図は、システムが毎日 01:00 に Hologres データソースからメタデータを 1 回自動的に収集することを示しています。[時刻] パラメーターの値に基づいて、[Cron 式] パラメーターの式が自動的に生成されます。
毎時: システムは、毎時
N × 5分に Hologres データソースからメタデータを 1 回自動的に収集します。説明毎時実行される Hologres メタデータ収集タスクの場合、[分] の値を 5 分の倍数に設定できます。
次の図は、システムが毎時 5 分と 10 分に Hologres データソースからメタデータを 1 回自動的に収集することを示しています。[分] パラメーターの値に基づいて、[Cron 式] パラメーターの式が自動的に生成されます。
[次へ] をクリックします。
クローラーの設定を確認します。
[情報確認] ステップで、指定した情報を確認します。
[確認] をクリックします。
[Hologres メタデータクローラー] ページで、クローラーに関する情報を表示し、クローラーを管理できます。
表示できる情報と実行できる操作は以下のとおりです。
クローラーのステータスと実行計画を表示できます。また、最終実行開始時刻、最終実行に要した時間、平均所要時間、最終実行で更新されたテーブル数、最終実行で作成されたテーブル数も表示できます。
[アクション] 列で、[詳細]、[編集]、[削除]、[実行]、または [停止] をクリックして、目的の操作を実行できます。
[詳細]: クローラー名、およびクローラー用に構成されたデータソースと実行計画を表示します。
[編集]: クローラーの構成を変更します。
[削除]: クローラーを削除します。
[実行]: Hologres データソースからメタデータを収集するタスクを実行します。[実行] ボタンは、[実行計画] パラメーターが [オンデマンド実行] に設定されている場合にのみ利用可能です。
[停止]: クローラーを停止します。[停止] ボタンは、クローラーが保留中ステータスの場合にのみ表示されます。
その他の操作
データ概要
データ概要ページでは、現在のリージョンでデータコレクターが構成されている Hologres データベースの統計情報とテーブル情報を表示できます。詳細については、「データ概要」をご参照ください。
ルックアップテーブル
データマップでは、テーブル名、テーブルの説明、フィールド名、またはフィールドの説明でテーブルを検索できます。また、カテゴリ、プロジェクト、またはデータベースでテーブルをフィルタリングすることもできます。詳細については、「テーブルの検索」をご参照ください。
テーブル詳細の表示
テーブル名をクリックすると、その詳細ページに移動します。詳細ページでは、テーブルの基本情報、出力情報、データリネージを表示できます。詳細については、「テーブル詳細の表示」をご参照ください。
テーブルのメタデータを表示できます。
テーブルおよびフィールドリネージを表示できます。
