Simple Log Service:OSS 転送タスクの作成（旧バージョン）

操作手順

1. Simple Log Service コンソールにログインします。

2. Projects セクションで、対象のプロジェクトをクリックします。

   

3. ログストレージ > Logstore タブで、対象 Logstore の左側にある > をクリックし、データ処理 > エクスポート > Object Storage Service (OSS) を選択します。

4. Object Storage Service (OSS) 上にマウスカーソルを合わせ、+ アイコンをクリックします。

5. OSS LogShipper パネルで、以下のパラメーターを設定し、OK をクリックします。

   [出荷バージョン] を [旧バージョン] に設定します。以下の表では、主要なパラメーターについて説明します。

   パラメーター	説明
   OSS shipper 名	転送タスクの名前です。
   OSS バケット	送信先 OSS バケットの名前です。 重要 バケットは事前に存在しており、Write-Once-Read-Many (WORM) ポリシーが無効化されており、SLS プロジェクトと同じリージョンに配置されている必要があります。WORM の詳細については、「保持ポリシー（WORM）」をご参照ください。 標準、低頻度アクセス（IA）、アーカイブ、コールドアーカイブストレージ、ディープコールドアーカイブストレージの各ストレージクラスのバケットにデータを転送できます。生成される OSS オブジェクトのデフォルトのストレージクラスは、バケットのストレージクラスと一致します。詳細については、「ストレージクラス」をご参照ください。 標準以外のストレージクラスには、最低保存期間および最低課金サイズが設定されています。送信先バケットのストレージクラスは、ご要件に合致するものを選択してください。詳細については、「ストレージクラスの比較」をご参照ください。
   ファイル配信ディレクトリ	OSS バケット内のディレクトリです。ディレクトリ名は、前方スラッシュ（/）またはバックスラッシュ（\）で始めてはいけません。 OSS 転送タスクが作成されると、Logstore のデータはこのディレクトリに送信されます。
   パーティションフォーマット	転送タスクの作成時刻に基づいて、OSS バケットのサブディレクトリを動的に生成するためのフォーマットです。フォーマットは前方スラッシュ（/）で始めてはいけません。デフォルト値は %Y/%m/%d/%H/%M です。例については、「パーティションフォーマット」をご参照ください。パラメーターの詳細については、strptime API をご参照ください。
   OSS 書き込み用 RAM ロール	OSS バケットへのデータ書き込みを許可する権限を、OSS 転送タスクに付与します。 デフォルトロール：Alibaba Cloud システムロール AliyunLogDefaultRole を使用して OSS バケットにデータを書き込むようジョブを承認します。AliyunLogDefaultRole の ARN を入力します。ARN の取得方法については、「デフォルトロールを使用したデータへのアクセス」をご参照ください。 カスタムロール：カスタムロールを使用して OSS バケットにデータを書き込むようジョブを承認します。 まず、カスタムロールに対して OSS バケットへの書き込み権限を付与する必要があります。その後、OSS 書き込み用 RAM ロール フィールドにカスタムロールの ARN を入力します。ARN の取得方法は以下のとおりです： Logstore と OSS バケットが同一 Alibaba Cloud アカウントに属する場合：「ステップ 2：RAM ロールに OSS バケットへの書き込み権限を付与する」をご参照ください。 Logstore と OSS バケットが異なる Alibaba Cloud アカウントに属する場合：「ステップ 2：RAM ロール role-b に OSS バケットへの書き込み権限を付与する」をご参照ください。
   配送サイズ	各シャードから転送するデータ量です。これは、各 OSS オブジェクトにおける非圧縮データのサイズを制御します。値は 5～256 の整数で指定します。単位：MB。 シャードから転送するデータ量がこの値に達すると、新しい転送インスタンスが自動的に作成されます。
   保存フォーマット	OSS へ転送されるデータの保存フォーマットです。詳細については、「JSON 形式」、「CSV 形式」および「Parquet 形式」をご参照ください。
   圧縮	OSS に保存されるデータの圧縮方式です。 圧縮なし：データは圧縮されません。 圧縮（snappy）：データは snappy アルゴリズムで圧縮されます。これにより、OSS バケット内のストレージ使用量を削減できます。
   出荷間隔	各シャードの転送間隔です。値は 300～900 の整数で指定します。デフォルト値は 300 です。単位：秒。 シャードの転送間隔が経過すると、新しい転送インスタンスが自動的に作成されます。

OSS 内のデータの表示

データが OSS へ正常に転送された後は、OSS コンソール、API、SDK またはその他のツールを使用してデータにアクセスできます。詳細については、「オブジェクト管理」をご参照ください。

oss://OSS-BUCKET/OSS-PREFIX/PARTITION-FORMAT_RANDOM-ID

パーティションフォーマット

Hive、MaxCompute、Data Lake Analytics (DLA) などのビッグデータプラットフォームで OSS データを分析する際は、パーティション情報を活用するために、パーティションフォーマットを key=value 形式に設定できます。たとえば、パス oss://test-bucket/log_ship_oss_example/year=2022/mon=01/day=20/log_195043_1484913043351525351_2850008.parquet では、year、mon、day の 3 つのパーティションカラムが使用されます。

その他の操作