問題リストページでは、Data Quality ルールの検証によって生成された例外や、アセットまたはタグに関して報告された問題を表示できます。また、修復の開始、例外の無視、ホワイトリストへの問題の追加など、これらの問題に対してガバナンス操作を実行することもできます。このトピックでは、問題リストの追加と管理方法について説明します。
使用上の注意
Data Quality モジュールをアクティブ化する必要があります。
権限の説明
スーパー管理者と品質管理者は、すべての問題の詳細を表示および管理できます。修復の開始、ホワイトリストへの問題の追加、例外の無視、再処理のための問題の差し戻しなどの操作を実行できます。
他のメンバーは、自身が報告した問題を表示できます。また、自身がオーナーである問題に対して操作を実行することもできます。これらの操作には、修復の開始、ホワイトリストへの問題の追加、例外の無視、再処理のための問題の差し戻しが含まれます。
オブジェクトを表示する権限を持つユーザーは誰でも問題を追加できます。
サポートされている操作権限はオブジェクトタイプによって異なります。詳細については、「問題リストの操作権限」をご参照ください。
さまざまな視点から問題リストを表示する
Dataphin では、[グローバル]、[プロジェクト]、[個人] の 3 つの視点から問題の詳細を表示できます。
グローバル: スーパー管理者と品質管理者は、グローバルな視点からすべての問題を表示できます。
プロジェクト: スーパー管理者と品質管理者は、任意のプロジェクトに切り替えて、そのプロジェクトのアセットオブジェクトの問題を表示できます。他のメンバーは、自身が参加しているプロジェクトのみを選択し、それらのプロジェクトの問題を表示できます。
説明グローバルテーブル、データソース、およびタグオブジェクトタイプは、プロジェクトビューには表示されません。
個人: スーパー管理者と品質管理者は、任意のメンバーに切り替えて、そのメンバーの問題を表示できます。他のメンバーは、自身が報告した、または責任を負う問題のみを表示でき、他のメンバーに切り替えることはできません。
問題を追加する
Dataphin のホームページで、トップメニューバーの [ガバナンス] > [Data Quality] をクリックします。
左側のナビゲーションウィンドウで、[問題リスト] をクリックします。[問題の追加] をクリックして、[品質問題の報告] ダイアログボックスを開きます。
[品質問題の報告] ダイアログボックスで、パラメーターを構成します。
パラメーター
説明
問題オブジェクト
問題を報告するオブジェクトを選択します。オブジェクトタイプに基づいて対応するパラメーターを設定します。データテーブルとリアルタイムメタテーブルの場合、特定のフィールドを選択しないと、問題はテーブルの粒度で記録されます。特定のフィールドを選択すると、問題は指定されたフィールドの粒度で記録されます。
問題タイプ
問題のタイプを選択します。適切な問題タイプがない場合は、必要な権限を持つ管理者に連絡して作成してもらいます。詳細については、「カスタム問題タイプ」をご参照ください。
問題の説明
問題のオーナーがバックグラウンド情報を理解できるように、問題の簡単な説明を入力します。説明は 1,000 文字を超えることはできません。
添付ファイル
[アップロード] ボタンをクリックして、ローカルコンピューターからファイルを選択します。1 つの問題に対して最大 5 つのファイルをアップロードできます。
サポートされているファイル形式は、Doc (.doc、.docx、.dot、.dotx、.rtf、.html、.xml、.txt)、Excel (.xls、.xlsx、.csv)、PDF、および画像 (.jpg、.png、.jpeg) です。ファイルサイズは 10 MB を超えることはできません。
連絡先情報
問題のオーナーが詳細についてあなたに連絡できるように、連絡先情報を提供します。サポートされている連絡方法は、電話、メール、その他です。
電話: 数字、ハイフン (-)、プラス記号 (+)、半角括弧、スペースを入力できます。値の長さは 20 文字を超えることはできません。
メール: メールアドレスを入力します。
その他: 値の長さは 100 文字を超えることはできません。
[OK] をクリックして、問題を追加します。
問題リストを表示する
問題リストページには、Data Quality 検証によって生成された問題と、アセットまたはタグについて報告された問題が表示されます。これらの問題に対して、修復の開始、ホワイトリストへの追加、無視、通知の送信などの操作を実行できます。
パラメーター | 説明 |
①凡例カード | Dataphin テーブル、グローバルデータテーブル、メトリック、データソース、リアルタイムメタテーブル、タグなど、さまざまなタイプのオブジェクトの保留中の問題数と問題の総数を表示します。切り替えて対応する問題リストを表示できます。 |
②検索とフィルターエリア | 監視対象の名前または品質ルールの名前に基づいてあいまい検索を実行できます。 Dataphin テーブル、グローバルデータテーブル、メトリック、データソース、およびリアルタイムメタテーブルについては、保留中の問題、私が報告した問題、私が担当する問題、ルールの重大度、問題のステータス、問題タイプ、提出方法または提出者、および問題のオーナーでフィルターできます。 タグについては、保留中の問題、私が報告した問題、私が担当する問題、問題のステータス、問題タイプ、および問題のオーナーでフィルターできます。 カスタム問題タイプ: 問題タイプの横にある [管理] をクリックします。[問題タイプの管理] ダイアログボックスで、問題タイプの名前を入力します。名前は 20 文字を超えることはできません。[OK] をクリックして問題タイプを作成します。 組み込みの問題タイプは編集または削除できません。カスタム問題タイプは編集または削除できます。 最大 50 個の問題タイプを作成できます。
|
③問題リスト | 品質ルールの検証によって生成されたシステム特定の問題については、ルール名、ルールの重大度、チェック範囲、およびチェック時間が表示されます。手動で提出された品質問題については、提出者情報が表示されます。問題のステータスごとに異なるガバナンス操作がサポートされています。詳細については、「個別操作」をご参照ください。
|
④バッチ操作エリア | システム特定の問題については、現在の例外を無視する、無視操作をキャンセルする、ホワイトリストに追加する、修復を開始する、問題タイプを変更する、ナレッジベースドキュメントを関連付けるなど、問題オブジェクトに対してバッチ操作を実行できます。 手動で提出された問題については、現在の例外を無視する、無視操作をキャンセルする、修復を開始する、処理済みとしてマークする、再処理のために差し戻す、問題タイプを変更する、問題のオーナーを変更するなど、問題オブジェクトに対してバッチ操作を実行できます。オーナー変更操作は、タグオブジェクトでのみサポートされています。 問題のステータスごとに異なるガバナンス操作をバッチで実行できます。詳細については、「バッチ操作」をご参照ください。 |
アイコンをクリックして、問題リストに表示したいフィールドを選択します。操作手順
問題ステータス
問題ステータス | 操作 |
[保留中] |
|
[検証中] | システム特定の問題については、次の操作を実行できます: [詳細の表示]、[修復の開始]、[問題のオーナーに通知]、[ホワイトリストに追加]、[問題タイプの変更]、[操作レコードの表示]、および [ナレッジベースドキュメントの関連付け]。 |
完了 |
|
[無視] |
|
個別操作
操作 | 説明 |
[詳細の表示] |
|
インテリジェントな根本原因分析 | この操作は、アセットオブジェクトが Dataphin テーブル (システム特定の問題) で、問題のステータスが [保留中] の場合に利用できます。[アクション] 列の [インテリジェントな根本原因分析] アイコンをクリックします。システムは大規模モデルを使用して品質問題を分析し、修復の提案を提供します。詳細については、「インテリジェントな根本原因分析の表示」をご参照ください。 |
[修復の開始] | 修復を開始した後、問題の修復フロー全体を追跡できます。 修復フローの設定方法については、「修復の開始」をご参照ください。修復フローの管理方法については、「修復フローの表示と管理」をご参照ください。 説明 スーパー管理者、品質管理者、問題のオーナー、およびガバナンスワークベンチでフローを管理する権限を持つカスタムグローバルロールのみがフローを開始できます。 |
[この例外を無視] | 保留中の問題を無視するように設定すると、それ以上の処理は必要ありません。重要でない問題は無視することをお勧めします。 シナリオ: データソース接続が中断されたが、現在は安定しており、修正する必要はありません。履歴タスクで例外が発生したが、そのタスクは最新のデータ処理では使用されなくなりました。このような場合、問題を無視することを選択できます。 |
無視をキャンセル |
|
課題所有者に通知 | 問題のオーナーに [内部メッセージ]、[電話]、[テキストメッセージ]、[メール]、または [DingTalk] で通知できます。 |
問題のオーナーを変更 | 現在の問題のオーナーを別のユーザーに変更できます。[問題のオーナーを変更] ダイアログボックスで、受信者を選択し、[OK] をクリックしてすぐにオーナーシップを転送します。転送後に受信者と同期することをお勧めします。 |
[処理済みとしてマーク] | [保留中] 状態の手動で提出された問題のみを処理済みとしてマークできます。修復を開始するには、処理結果を返すことができます。 |
[再処理のために戻す] | [完了] 状態の手動で提出された問題のみを再処理のために差し戻すことができます。問題が差し戻されると、そのステータスは [保留中] に変わります。 内部メッセージで問題のオーナーに通知して、オーナーが問題を迅速に処理するようにできます。 説明 スーパー管理者、品質管理者、問題のオーナー、およびガバナンスワークベンチでフローを管理する権限を持つカスタムグローバルロールのみが、再処理のために問題を差し戻すことができます。 |
[問題タイプの変更] | フィルタリングと統計分析を容易にするために、問題をタイプ別に分類できます。システム特定の問題には、品質ルールタイプに基づいてデフォルトのシステム問題タイプが割り当てられます。このタイプは変更できません。手動で設定された問題タイプを追加または削除できます。 適切な問題タイプがない場合は、作成できます。詳細については、「カスタム問題タイプ」をご参照ください。 |
[問題の削除] | 問題を削除すると、修復フローからも削除されます。この操作は元に戻せません。続行する前に影響を評価してください。 |
[ホワイトリストに追加] | シナリオ: 現在のテーブルはテスト段階にあり、データは不安定です。データが安定するまで待ってから監視できます。 問題をホワイトリストに追加する方法については、「ホワイトリストへの追加」をご参照ください。ホワイトリストの管理方法については、「ガバナンスホワイトリストの表示と管理」をご参照ください。 説明
|
再チェック | [保留中] または [無視] 状態のシステム特定の問題のみを再チェックできます。Data Quality 問題が解決された場合、現在の問題のチェックルールを再実行できます。問題のステータスはチェック結果に基づいて更新されます。チェックに合格した場合、問題のステータスは [完了] に変わります。チェックに失敗した場合、問題のステータスは [保留中] に変わります。 |
[操作レコードの表示] | 現在の問題の操作レコードを表示します。レコードには、問題オブジェクト名、操作タイプ、問題のステータス、操作の説明、オペレーター、および操作時間が含まれます。 |
[ナレッジベースドキュメントの関連付け] | ナレッジはシステム特定の問題にのみ関連付けることができます。ルールがナレッジに関連付けられると、品質ルールと問題リストで関連付けられたナレッジを表示できます。問題オブジェクトに対してバッチでナレッジベースを設定できます。ナレッジベースを作成するには、「ナレッジベースの作成」をご参照ください。 |
アイコンをクリックします。[詳細の表示] ダイアログボックスで、[チェックの詳細] タブをクリックして、現在の問題の最新のチェック詳細を表示します。詳細には、基本情報、チェック設定、およびチェック結果が含まれます。バッチ操作
操作 | 説明 |
[この例外を無視] | 保留中の問題を無視するように設定できます。その後、処理は必要ありません。重要でない問題は無視することをお勧めします。 シナリオ: データソース接続が中断されたが、現在は安定しており、修正する必要はありません。履歴タスクで例外が発生したが、そのタスクは最新のデータ処理では使用されなくなりました。このような場合、問題を無視することを選択できます。 |
[無視をキャンセル] | [無視] 状態の問題に対してのみ無視操作をキャンセルできます。無視操作をキャンセルすると、手動で提出された問題のステータスは [保留中] に変わります。システム特定の問題のステータスは、最新のルールチェックの結果に基づいて決定されます。チェックに合格した場合、問題のステータスは [完了] に変わります。チェックに失敗した場合、問題のステータスは [保留中] に変わります。 |
[ホワイトリストに追加] | シナリオ: 現在のテーブルはテスト段階にあり、データは不安定です。データが安定するまで待ってから監視できます。問題をホワイトリストに追加する方法については、「ホワイトリストへの追加」をご参照ください。ホワイトリストの管理方法については、「ガバナンスホワイトリストの表示と管理」をご参照ください。
|
修正の開始 | 修復を開始した後、問題の詳細について修復フロー全体を追跡できます。バッチで修復フローを開始する手順は、単一操作の手順と同じです。詳細については、「修復の開始」をご参照ください。修復フローの管理方法については、「修復フローの表示と管理」をご参照ください。
|
再チェック | [保留中] または [無視] 状態のシステム特定の問題のみを再チェックできます。Data Quality 問題が解決された場合、現在のページで選択した問題のチェックルールを再実行できます。問題のステータスはチェック結果に基づいて更新されます。チェックに合格した場合、問題のステータスは [完了] に変わります。チェックに失敗した場合、問題のステータスは [保留中] に変わります。 |
[処理済みとしてマーク] | [保留中] 状態の手動で提出された問題のみを処理済みとしてマークできます。修復を開始するには、処理結果を返すことができます。 |
[再処理のために戻す] | [完了] 状態の手動で提出された問題のみを再処理のために差し戻すことができます。問題が差し戻されると、そのステータスは [保留中] に変わります。 説明 スーパー管理者、品質管理者、問題のオーナー、およびガバナンスワークベンチでフローを管理する権限を持つカスタムグローバルロールのみが、再処理のために問題を差し戻すことができます。 |
[問題タイプの変更] | 問題タイプを追加または変更できます。この操作はカスタム問題タイプにのみ適用されます。ルールタイプに基づいて自動的に生成されるシステム問題タイプには適用されません。
|
[問題のエクスポート] | 現在のページで選択した問題をエクスポートします。ダイアログボックスで、エクスポートするコンテンツを選択し、[OK] をクリックします。 |
問題のオーナーを変更 | 現在の問題のオーナーを別のユーザーに変更できます。[問題のオーナーを変更] ダイアログボックスで、受信者を選択し、[OK] をクリックしてすぐにオーナーシップを転送します。転送後に受信者と同期することをお勧めします。 |
[ナレッジベースドキュメントの関連付け] | ナレッジはシステム特定の問題にのみ関連付けることができます。ルールがナレッジに関連付けられると、品質ルールと問題リストで関連付けられたナレッジを表示できます。問題オブジェクトに対してバッチでナレッジベースを設定できます。ナレッジベースを作成するには、「ナレッジベースの作成」をご参照ください。 |
ホワイトリストへの追加
問題を個別またはバッチでホワイトリストに追加できます。
[課題リスト] ページで、対象の課題を見つけ、[アクション] 列の
アイコンをクリックし、[ホワイトリストに追加] を選択します。[ホワイトリストに追加] ダイアログボックスで、パラメーターを構成します。
パラメーター
説明
ホワイトリスト範囲
無視されていないシステム特定の問題のみをホワイトリストに追加できます。
単一の問題オブジェクトを選択した場合、[現在のルール] または [現在の監視対象] をホワイトリストに追加できます。
現在のルール: 有効期間中、現在のチェックレコードおよび現在の問題と同じ品質ルールに属する [保留中] または [検証中] 状態のすべての生成された問題に対して新しい品質チェックの失敗が発生した場合、それらのステータスは自動的に [無視] に変わります。
現在の監視対象: 有効期間中、現在の問題と同じ監視対象に属する [保留中] または [検証中] 状態のすべての問題に対して新しい品質チェックの失敗が発生した場合、それらのステータスは自動的に [無視] に変わります。
有効期間
[7日間]、[30日間]、[90日間]、[180日間]、[永続的]、または [カスタム] を選択できます。 適用日はカウントされません。
説明ホワイトリストの有効期限が切れると、履歴の問題は遡って報告されませんが、その後の新しい問題は報告されます。
[操作の説明]
このパラメーターは必須です。問題をホワイトリストに追加する理由を入力します。理由は 128 文字を超えることはできません。
[OK] をクリックして、問題をホワイトリストに追加します。
修復を開始する
問題を個別またはバッチで修復を開始できます。
[問題リスト] ページで、対象の問題を見つけ、[アクション] 列の
アイコンをクリックします。[修復の開始] ダイアログボックスが表示されます。[修復の開始] ダイアログボックスで、パラメーターを構成します。
パラメーター
説明
修正範囲
システム特定の問題オブジェクトについては、[現在の問題]、[現在のルール]、または [現在の監視対象] の修復を開始できます。手動で提出された問題オブジェクトについては、[現在の問題] のみ修復を開始できます。
現在の問題: 現在のチェックレコードの問題のみを含みます。現在の問題オブジェクトと同じルールに属する他の保留中の問題は含まれません。
現在のルール: 現在のチェックレコードの問題と、同じ品質ルールに属するすべての生成された保留中のシステム特定の問題を含みます。複数のチェック範囲が含まれる場合があります。
現在の監視対象: 現在のチェックレコードの問題と、現在の問題と同じ監視対象に属するすべての保留中のシステム特定の問題を含みます。複数の問題オブジェクトとチェック範囲が含まれる場合があります。
説明選択した問題がすでに修復フローにある場合、元のフローに残ります。修復は再度開始されません。
開始方法
新しいフローを作成するか、既存のフローに関連付けることができます。
新しいフローの作成: 修復フローの名前をカスタマイズします。名前は 128 文字を超えることはできません。
既存のフローとの関連付け: 現在のオブジェクトタイプに対して作成され、[修復中] または [再修復中] 状態のフローに関連付けることができます。スーパー管理者、品質管理者、問題のオーナー、およびガバナンスワークベンチでフローを管理する権限を持つカスタムグローバルロールのみがすべてのフローを選択できます。
修正者
修復者は、修復プロセスを担当する人物です。問題オブジェクトの品質オーナーを選択することをお勧めします。これにより、オーナーは修復フローでシステム特定の問題を編集したり、チェックを再開したりできます。そうしないと、問題のステータスが更新されない場合があります。[開始方法] を [既存のフローとの関連付け] に設定した場合、修復者は選択したフローの修復者にデフォルト設定され、変更できません。
検証者
検証者は、修復結果に最終的に責任を負う人物です。[開始方法] を [既存のフローとの関連付け] に設定した場合、検証者は選択したフローの検証者にデフォルト設定され、変更できません。
優先度
優先度レベルは [高]、[中]、および [低] です。[開始方法] を [既存のフローとの関連付け] に設定した場合、優先度は選択したフローの優先度にデフォルト設定され、変更できません。
操作の説明
修復を開始する理由を入力します。理由は 128 文字を超えることはできません。
[OK] をクリックして修復を開始します。
問題リストのエクスポート
表示する権限がある問題のみをエクスポートできます。
各テナントは、最大 5 つの同時エクスポートタスクをサポートします。
問題リストに大量のデータが含まれている場合、ファイルの生成に時間がかかることがあります。バッチエクスポートペインで履歴エクスポートレコードを表示できます。詳細については、「問題のエクスポートレコード」をご参照ください。
[問題リスト] ページで、右上隅の [問題のエクスポート] ボタンをクリックし、[すべての問題をエクスポート] または [検索およびフィルター条件でエクスポート] を選択します。
すべての問題をエクスポート: 現在のビューで指定されたオブジェクトタイプのすべての問題をエクスポートします。
検索およびフィルター条件でエクスポート: 指定されたキーワード検索およびフィルター条件に一致する現在のビューのすべての問題をエクスポートします。たとえば、[保留中] ステータスのすべての問題をフィルターしてエクスポートできます。
ダイアログボックスで、エクスポートするコンテンツを選択します。
[OK] をクリックして問題をエクスポートします。
問題のエクスポートレコード
このペインには、最新 50 件のエクスポート操作が表示されます。
過去 7 日間に正常にエクスポートされたファイルをダウンロードできます。
[問題リスト] ページで、右上隅にある [問題のエクスポート] ボタンをクリックし、[バッチエクスポートレコードの表示] を選択します。
[一括エクスポートレコード] ペインでは、序数、オブジェクトタイプ、提出時間、操作ステータスなど、各エクスポートタスクの詳細を表示できます。また、[アクション] 列にある
アイコンをクリックして、エクスポートされたファイルをローカルコンピューターにダウンロードすることもできます。これにより、業務担当者は統計分析やアーカイブを行うことができます。