Tablestore:OSS への全量データのエクスポート

コードレス UI

次の項目を設定します。

• データソース：ソースと宛先のデータソースを選択します。

• [実行中のリソース]：リソースグループを選択します。システムは自動的にデータソースの接続性をテストします。

• [データソース]：

  • [テーブル]：ドロップダウンリストからソースデータテーブルを選択します。

  • [プライマリキー範囲分布 (開始)]：読み取るプライマリキー範囲の開始。JSON 配列として指定します。値 inf_min は負の無限大を表します。

    プライマリキーが int 型プライマリキー列 (名前：id) と string 型プライマリキー列 (名前：name) で構成されている場合、次の設定例をご参照ください。

    プライマリキー範囲	全量データ
    [ { "type": "int", "value": "000" }, { "type": "string", "value": "aaa" } ]	[ { "type": "inf_min" }, { "type": "inf_min" } ]

  • [プライマリキー範囲分布 (終了)]：読み取るプライマリキー範囲の終了。JSON 配列として指定します。値 inf_max は正の無限大を表します。

    プライマリキーが int 型プライマリキー列 (名前：id) と string 型プライマリキー列 (名前：name) で構成されている場合、次の設定例をご参照ください。

    プライマリキー範囲	全量データ
    [ { "type": "int", "value": "999" }, { "type": "string", "value": "zzz" } ]	[ { "type": "inf_max" }, { "type": "inf_max" } ]

  • [チャンク構成情報]：通常、このパラメーターは不要です。[] に設定してください。

    Tablestore データにホットスポットがあり、自動分割ポリシーが効果的でない場合は、カスタム分割ルールを使用します。これらのルールは、プライマリキー範囲内の分割点を定義します。すべてのプライマリキー列ではなく、分割キーのみを設定する必要があります。

• [データ転送先]：ターゲットの [テキストタイプ] を選択し、関連するパラメーターを設定します。

  • [テキストタイプ]：オプションには、[csv]、[text]、[orc]、[parquet] があります。

  • [ファイル名 (パスを含む)]：OSS バケット内の宛先ファイルのパスと名前。例：tablestore/resource_table.csv。

  • [列区切り文字]：デフォルトは , です。区切り文字が印字不可能な文字の場合は、\u001b や \u007c などの Unicode エンコーディングを入力します。

  • [ファイルパス]：[parquet] テキストタイプの場合にのみ必須です。OSS バケット内のファイルパスを指定します。

  • [ファイル名]：[parquet] テキストタイプの場合にのみ必須です。OSS バケット内のファイル名を指定します。

• [宛先フィールドマッピング]：ソーステーブルのフィールドを宛先ファイルにマッピングします。JSON 形式で指定された各行が 1 つのフィールドを表します。

  • [ソースフィールド]：ソーステーブルのプライマリキーフィールドと属性列を含みます。

    プライマリキーが int 型プライマリキー列 (名前：id) と string 型プライマリキー列 (名前：name) で構成され、int 型属性列 (名前：age) がある場合、次の例をご参照ください。

    {"name":"id","type":"int"}
    {"name":"name","type":"string"}
    {"name":"age","type":"int"}

  • [ターゲットフィールド]：ソーステーブルのプライマリキーフィールドと属性列を含みます。

    プライマリキーが int 型プライマリキー列 (名前：id) と string 型プライマリキー列 (名前：name) で構成され、int 型属性列 (名前：age) がある場合、次の例をご参照ください。

    {"name":"id","type":"int"}
    {"name":"name","type":"string"}
    {"name":"age","type":"int"}

設定を完了したら、ページの上部にある保存をクリックします。

スクリプトモード

ページの上部で、コードエディタ をクリックしてスクリプト編集ビューに切り替えます。

次のスクリプト例は、CSV ファイルにエクスポートするためのものです。ソーステーブルのプライマリキーは、int 型列 (名前：id) と string 型列 (名前：name) で構成されています。テーブルには、int 型属性列 (名前：age) も含まれています。スクリプトを使用するときは、datasource、table、および object の値を ご自身の値に置き換えてください。

{
    "type": "job",
    "version": "2.0",
    "steps": [
        {
            "stepType": "ots",
            "parameter": {
                "datasource": "source_data",
                "column": [
                    {
                        "name": "id",
                        "type": "int"
                    },
                    {
                        "name": "name",
                        "type": "string"
                    },
                    {
                        "name": "age",
                        "type": "int"
                    }
                ],
                "range": {
                    "begin": [
                        {
                            "type": "inf_min"
                        },
                        {
                            "type": "inf_min"
                        }
                    ],
                    "end": [
                        {
                            "type": "inf_max"
                        },
                        {
                            "type": "inf_max"
                        }
                    ],
                    "split": []
                },
                "table": "source_table",
                "newVersion": "true"
            },
            "name": "Reader",
            "category": "reader"
        },
        {
            "stepType": "oss",
            "parameter": {
                "dateFormat": "yyyy-MM-dd HH:mm:ss",
                "datasource": "target_data",
                "writeSingleObject": false,
                "column": [
                    {
                        "name": "id",
                        "type": "int"
                    },
                    {
                        "name": "name",
                        "type": "string"
                    },
                    {
                        "name": "age",
                        "type": "int"
                    }
                ],
                "writeMode": "truncate",
                "encoding": "UTF-8",
                "fieldDelimiter": ",",
                "fileFormat": "csv",
                "object": "tablestore/source_table.csv"
            },
            "name": "Writer",
            "category": "writer"
        }
    ],
    "setting": {
        "errorLimit": {
            "record": "0"
        },
        "speed": {
            "concurrent": 2,
            "throttle": false
        }
    },
    "order": {
        "hops": [
            {
                "from": "Reader",
                "to": "Writer"
            }
        ]
    }
}

スクリプトの編集が完了したら、ページ上部の保存をクリックします。