すべてのプロダクト
Search
ドキュメントセンター

Dataphin:Vertica 出力コンポーネントを構成する

最終更新日:May 29, 2025

Vertica 出力コンポーネントは、Vertica データソースにデータを書き込みます。他のデータソースから Vertica データソースにデータを同期する場合、ソースデータ情報を構成した後、Vertica 出力コンポーネントのターゲットデータソースを構成する必要があります。このトピックでは、Vertica 出力コンポーネントを構成する方法について説明します。

前提条件

  • Vertica データソースを追加済みであること。詳細については、「Vertica データソースを作成する」をご参照ください。

  • Vertica 出力コンポーネントのプロパティを構成するために使用するアカウントは、データソースに対するライトスルー権限を持っている必要があります。権限がない場合は、データソース権限をリクエストする必要があります。詳細については、「データソース権限をリクエスト、更新、および返却する」をご参照ください。

手順

  1. Dataphin ホームページの上部ナビゲーションバーで、[開発] > [Data Integration] を選択します。

  2. プロジェクト環境統合ページの上部ナビゲーションバーで、 を選択します(開発-本番モードでは、 を選択する必要があります)。

  3. 左側のナビゲーションウィンドウで、[バッチパイプライン]オフライン パイプライン をクリックし、[バッチパイプライン] リストで開発するオフラインパイプラインをクリックして、オフラインパイプラインの構成ページを開きます。

  4. ページの右上隅にある [コンポーネントライブラリ] をクリックして、[コンポーネントライブラリ] パネルを開きます。

  5. [コンポーネントライブラリ] パネルの左側のナビゲーションウィンドウで、[出力] を選択し、右側の出力コンポーネントリストで [Vertica] コンポーネントを見つけて、キャンバスにドラッグします。

  6. ターゲットの入力、変換、またはフローコンポーネントの image アイコンをクリックしてドラッグし、現在の Vertica 出力コンポーネントに接続します。

  7. Vertica 出力コンポーネントカードの image アイコンをクリックして、[Vertica 出力構成] ダイアログボックスを開きます。image

  8. [Vertica 出力構成] ダイアログボックスで、パラメーターを構成します。

    パラメーター

    説明

    [基本設定]

    [ステップ名]

    Vertica 出力コンポーネントの名前。Dataphin は自動的にステップ名を生成しますが、ビジネスシナリオに基づいて変更できます。名前は次の要件を満たしている必要があります。

    • 漢字、英字、アンダースコア (_)、および数字のみを含めることができます。

    • 長さは 64 文字を超えることはできません。

    [データソース]

    データソースのドロップダウンリストには、ライトスルー権限を持つデータソースと持たないデータソースを含め、すべての Vertica タイプのデータソースが表示されます。image アイコンをクリックして、現在のデータソース名をコピーします。

    • ライトスルー権限のないデータソースの場合、データソースの後に [リクエスト] をクリックして、データソースのライトスルー権限をリクエストできます。詳細については、「データソース権限をリクエストする」をご参照ください。

    • Vertica タイプのデータソースがない場合は、[データソースの作成] をクリックしてデータソースを作成します。詳細については、「Vertica データソースを作成する」をご参照ください。

    [テーブル]

    出力データのターゲットテーブルを選択します。 キーワードを入力してテーブルを検索するか、正確なテーブル名を入力して [完全一致] をクリックします。テーブルを選択すると、システムは自動的にテーブルステータスをチェックします。image アイコンをクリックして、現在選択されているテーブルの名前をコピーします。

    バッチ書き込みサイズ (オプション)

    一度に書き込むデータのサイズ。[バッチ書き込みレコード] も設定できます。データを書き込むとき、システムは最初に達した制限に基づいてデータを書き込みます。デフォルト値は 32M です。

    バッチ書き込みレコード (オプション)

    デフォルト値は 2048 レコードです。データが同期および書き込みされるとき、バッチ書き込み戦略が使用されます。パラメーターには、[バッチ書き込みレコード][バッチ書き込みサイズ] が含まれます。

    • 累積データが指定された制限(バッチ書き込みサイズまたはレコード数)のいずれかに達すると、システムはデータのバッチがいっぱいになったと見なし、このバッチデータをすぐに宛先に一度に書き込みます。

    • バッチ書き込みサイズを 32MB に設定することをお勧めします。バッチ挿入レコードの上限については、1 レコードの実際のサイズに基づいて柔軟に調整できます。通常は、バッチ書き込みの利点を最大限に活用するために、より大きな値に設定します。たとえば、1 レコードのサイズが約 1KB の場合、バッチ挿入バイトサイズを 16MB に設定し、この条件を考慮して、バッチ挿入レコードを 16MB を 1 レコードサイズ 1KB で割った結果よりも大きい値(つまり、16384 レコードより大きい値)に設定します。ここでは 20000 レコードに設定されていると仮定します。この構成では、システムはバッチ挿入バイトサイズに基づいてバッチ書き込みをトリガーし、累積データが 16MB に達するたびに書き込み操作を実行します。

    プリステートメント (オプション)

    データインポートの前にデータベースで実行される SQL スクリプト。

    たとえば、サービスの継続的な可用性を確保するために、現在のステップがデータを書き込む前に、まずターゲットテーブル Target_A を作成し、次にターゲットテーブル Target_A への書き込みを実行します。現在のステップがデータの書き込みを完了した後、データベース内で継続的にサービスを提供するテーブル Service_B の名前を Temp_C に変更し、次にテーブル Target_A の名前を Service_B に変更し、最後に Temp_C を削除します。

    ポストステートメント (オプション)

    データインポート後にデータベースで実行される SQL スクリプト。

    [フィールドマッピング]

    入力フィールド

    上流コンポーネントの出力に基づいて入力フィールドを表示します。

    出力フィールド

    出力フィールドを表示します。次の操作を実行できます。

    • フィールド管理[フィールド管理] をクリックして出力フィールドを選択します。

      image

      • gaagag アイコンをクリックして、[選択済みの入力フィールド][選択されていない入力フィールド] に移動します。

      • agfag アイコンをクリックして、[選択されていない入力フィールド][選択済みの入力フィールド] に移動します。

    • 一括追加[一括追加] をクリックして、JSON、TEXT、または DDL 形式で構成します

      • JSON 形式での一括構成。例:

        // 例:
        [{
          "name": "user_id",
          "type": "String"
         },
         {
          "name": "user_name",
          "type": "String"
         }]
        説明

        name はインポートされたフィールド名を表し、type はインポート後のフィールドタイプを表します。たとえば、"name":"user_id","type":"String" は、user_id という名前のフィールドをインポートし、そのフィールドタイプを String に設定することを意味します。

      • TEXT 形式での一括構成。例:

        // 例:
        user_id,String
        user_name,String
        • 行区切り文字は、各フィールドの情報を区切るために使用されます。デフォルトは改行(\n)です。改行(\n)、セミコロン(;)、およびピリオド(.)をサポートしています。

        • 列区切り文字は、フィールド名とフィールドタイプを区切るために使用されます。デフォルトはカンマ(,)です。

      • DDL 形式での一括構成。例:

        CREATE TABLE tablename (
            id INT PRIMARY KEY,
            name VARCHAR(50),
            age INT
        );
    • 出力フィールドの作成[+ 出力フィールドの作成] をクリックし、プロンプトに従って [列] に入力し、[タイプ] を選択します。現在の行の構成が完了したら、image アイコンをクリックして保存します。

    [クイックマッピング]

    上流の入力とターゲットテーブルのフィールドに基づいて、フィールドマッピングを手動で選択できます。[クイックマッピング] には、[同じ行のマッピング][同じ名前のマッピング] が含まれます。

    • 同じ名前のマッピング:同じフィールド名を持つフィールドをマッピングします。

    • 同じ行のマッピング:ソーステーブルとターゲットテーブルのフィールド名が一致しませんが、フィールドの対応する行のデータをマッピングする必要があります。同じ行のフィールドのみをマッピングします。

  9. [OK] をクリックして、Vertica 出力コンポーネントのプロパティ構成を完了します。