Simple Log Service:ログのダウンロード

コンソール

Simple Log Service コンソールでは、ログとクエリおよび分析結果の両方をダウンロードできます。以下の手順では、ログのダウンロードを例に説明します。クエリおよび分析結果をダウンロードするには、クエリ文を実行し、グラフ タブで ログのダウンロード をクリックします。

1. Simple Log Service コンソールにログインします。

2. **[プロジェクト]** セクションで、対象のプロジェクトをクリックします。

3. 左側のメニューで、ログ管理 > Logstores を選択します。**[Logstore]** ページで、対象の Logstore をクリックします。

4. クエリステートメントを入力し、時間範囲を選択します。

5. Rawデータ タブで、 > ログのダウンロード を選択します。

6. ログのダウンロード ダイアログボックスで、次のパラメーターを設定し、OK をクリックします。

   パラメーター	説明
   [タスク名]	ダウンロードタスクの名前。
   [ログの数量]	ダウンロードするログの件数。
   [データフォーマット]	CSV または JSON。 CSV：列名は最初の 100 ログフィールドから取得されます。後続のログの新しいフィールドは、名前のない最後の列に JSON 形式で保存されます。 JSON：各ログエントリは単一の JSON 行です。
   [引用]	意図しないエスケープを防ぐために、特殊文字を含むフィールドを囲みます。
   [不正確な結果をダウンロード]	いいえ を選択すると、クエリ結果が不正確な場合にダウンロードが失敗します。
   [圧縮方法]	gzip、lz4、zstd、または圧縮なし。 圧縮により、大規模なデータセットのファイルサイズとダウンロード時間が大幅に削減されます。

7. ダウンロードタスク ダイアログボックスで、タスクの ステータス が 成功 に変わるまで待ち、ダウンロード をクリックしてログをローカルマシンに保存します。

   または、Rawデータ タブで、 > ダウンロードタスク を選択して ダウンロードタスク ダイアログボックスを開き、ダウンロード履歴を表示できます。

Cloud Shell

Cloud Shell は中国 (上海) にデプロイされています。他のリージョンの Logstore からダウンロードすると、アウトバウンドのインターネットトラフィック料金が発生します。料金。

大規模なログのエクスポート：数億件などの大量のログの場合は、コンソールからバッチでダウンロードする代わりに、Cloud Shell または CLI/SDK を使用します。Cloud Shell は手動での依存関係のインストールが不要で、大規模なエクスポートタスクに適しています。

詳細な手順については、「Cloud Shell を使用したログデータのダウンロード」をご参照ください。

CLI

ログの量が多い場合は、コマンドラインインターフェイスを使用してください。

1. CLI をインストールします。詳細については、「CLI のインストール」をご参照ください。

2. アカウントの AccessKey ペアを取得します。詳細については、「AccessKey ペア」をご参照ください。

3. 次のコマンドでログをダウンロードします。詳細な手順については、「get_log_all」をご参照ください。

   例：次のコマンドはログをダウンロードし、作業ディレクトリの downloaded_data.txt に保存します。

   aliyunlog log get_log_all --project="aliyun-test-project" --Logstore="aliyun-test-Logstore" --from_time="2024-07-01 15:33:00+8:00" --to_time="2024-07-09 15:23:00+8:00"  --query="status:200|select request_method as method,COUNT(*) as pv group by method order by pv" --region-endpoint="cn-hangzhou.log.aliyuncs.com" --format-output=json --access-id="LT***CyGg" --access-key="8P***zi" >> ./downloaded_data.txt

SLS コマンドラインインターフェイス (CLI) のログダウンロードコマンドでは、現在、--compress と --query を同じコマンドで同時に使用することはできません。条件によってログをフィルタリングし、同時に大容量のデータを圧縮してダウンロードする必要がある場合は、代わりに CreateDownloadJob API を呼び出し、ダウンロードジョブを作成してください。

詳細については、「SLS CLI の使用」をご参照ください。

SDK

import os
import time

from aliyun.log import LogClient
from aliyun.log import GetLogsRequest

# Simple Log Service のエンドポイント。
endpoint = 'cn-qingdao.log.aliyuncs.com'
# この例では、環境変数から AccessKey ID と AccessKey シークレットを取得します。
accessKeyId = os.environ.get('ALIBABA_CLOUD_ACCESS_KEY_ID', '')
accessKey = os.environ.get('ALIBABA_CLOUD_ACCESS_KEY_SECRET', '')
# プロジェクト名。
project = 'your-project-name'
# Logstore 名。
Logstore = 'your-Logstore-name'
client = LogClient(endpoint, accessKeyId, accessKey)
request = GetLogsRequest(project, Logstore, fromTime=int(time()-3600), toTime=int(time()), topic='', query="*", line=100, offset=0, reverse=False)
# または
# request = GetLogsRequest(project, Logstore, fromTime="2018-1-1 10:10:10", toTime="2018-1-1 10:20:10", topic='', query="*", line=100, offset=0, reverse=False)

res = client.get_logs(request)
res.log_print()

詳細については、「SDK リファレンスの概要」をご参照ください。