Simple Log Service:他の Alibaba Cloud アカウントの ECS インスタンスから Simple Log Service にログを収集する

利用シーン

マルチアカウントのクラウド環境では、一般的に以下の理由でログの一元化が必要になる場合があります。

• 統合されたサービス監視：異なるビジネスアカウントのアプリケーションログとシステムログを中央の場所に保存します。これにより、統合された監視、アラート、トラブルシューティングが簡素化されます。

• セキュリティとコンプライアンスの監査：すべての操作ログとセキュリティログを専用のセキュリティまたは監査アカウントに集約し、コンプライアンス要件を満たします。

• ビジネス移行：ある Alibaba Cloud アカウントから別の Alibaba Cloud アカウントへのビジネス移行中に、ログ収集タスクを新しいアカウントに移行します。

このトピックでは、ログ収集タスクをソースアカウントから宛先アカウントに移行する例を使用します。

ソリューションアーキテクチャ

このソリューションでは、ファイルベースの権限付与に基づく信頼モデルを使用します。ソースアカウントの ECS インスタンスに特定の権限付与ファイルと ID ファイルを作成できます。これにより、宛先アカウントは Logtail を使用してこれらのインスタンスからログを収集する権限を付与されます。

ワークフローは以下の通りです。

1. ソースアカウント (アカウント B) の各 ECS インスタンスで、権限付与ファイルを作成します。ファイル名は宛先アカウント (アカウント A) の UID です。

2. 同じ ECS インスタンスで、カスタム ID を含むファイルを作成します。この ID は、宛先アカウントでサーバーをグループ化するために使用されます。

3. ECS インスタンス上の Logtail クライアントが権限付与ファイルを認識すると、宛先アカウント (アカウント A) の Simple Log Service にハートビートを送信し、カスタム ID をレポートします。

4. 宛先アカウント (アカウント A) の Simple Log Service コンソールで、このカスタム ID を使用するマシングループを作成します。ハートビートが正常な ECS インスタンスは、自動的にこのマシングループに追加されます。

5. Logtail 収集設定をマシングループに適用します。Logtail は設定に基づいてログを収集し、宛先アカウント (アカウント A) の Logstore に送信します。

操作手順

#!/bin/bash

# 宛先アカウント (アカウント A) の 16 桁の Alibaba Cloud アカウント ID に置き換えます。
TARGET_ACCOUNT_ID="{TARGET_ACCOUNT_ID}"

# このマシングループの一意の ID を定義します。
# 「my-app-prod-servers」など、ビジネス名と環境名を組み合わせたものを使用します。
MACHINE_GROUP_ID="{YOUR_MACHINE_GROUP_ID}"

# 1. 権限付与ファイルのディレクトリを作成します。
sudo mkdir -p /etc/ilogtail/users

# 2. 権限付与ファイルを作成します。ファイル名は宛先アカウント ID です。これにより、そのアカウントに収集権限が付与されます。
sudo touch "/etc/ilogtail/users/${TARGET_ACCOUNT_ID}"

# 3. カスタム ID ファイルを作成します。このファイルは、宛先アカウントでマシンを識別し、グループ化するために使用されます。
echo "${MACHINE_GROUP_ID}" | sudo tee /etc/ilogtail/user_defined_id > /dev/null

# 4. Logtail サービスを再起動して設定を適用します。
# システムが systemd を使用していない場合は、「sudo /etc/init.d/ilogtaild restart」を実行します。
sudo systemctl restart ilogtail

echo "設定が完了しました。宛先アカウントの Simple Log Service コンソールでマシングループのハートビートステータスを確認してください。"

ステップ 1：ユーザー ID ファイルの作成

1. Alibaba Cloud アカウント B に属する ECS サーバーにログインします。

   重要

   ECS クラスター B の各 ECS サーバーにユーザー ID ファイルを作成する必要があります。

2. 次のコマンドを実行して、ユーザー ID ファイルを作成します。

   ユーザー ID を Alibaba Cloud アカウント A に設定します。これにより、Alibaba Cloud アカウント A の ID を名前とするファイルが作成されます。詳細については、「ユーザー ID の設定」をご参照ください。

   touch /etc/ilogtail/users/12****456

ステップ 2：カスタム ID ベースのマシングループの作成

1. ECS サーバー上にマシングループのカスタム ID ファイルを作成します。

   重要

   ECS クラスター B の各 ECS サーバーにマシングループのカスタム ID ファイルを作成する必要があります。

   1. Alibaba Cloud アカウント B に属する ECS サーバーにログインします。

   2. 指定されたディレクトリに /etc/ilogtail/user_defined_id ファイルを作成し、カスタム ID を追加します。

      例えば、カスタム ID を application_b に設定するには、ファイルに application_b と入力して保存します。ファイルパスの詳細については、「カスタム ID ベースのマシングループの作成」をご参照ください。

2. Simple Log Service コンソールでマシングループを作成します。

   1. Alibaba Cloud アカウント A を使用して、Simple Log Service コンソールにログインします。

   2. [Project List] エリアで、宛先プロジェクトをクリックします。

   3. ナビゲーションウィンドウで、[リソース] > [マシングループ] を選択します。

   4. [マシン グループ] の右にある > [マシン グループの作成] をクリックします。

   5. [マシン グループの作成] ダイアログボックスで、次のパラメーターを設定し、[OK] をクリックします。

      [カスタム識別子] には、ステップ 1 で設定したカスタム識別子を設定します。 その他のパラメーターの詳細については、「カスタム識別子ベースのマシングループを作成する」をご参照ください。

3. マシングループ内のサーバーのハートビートステータスが OK であることを確認します。

   1. マシングループリストで、宛先マシングループをクリックします。

   2. [マシン グループ設定] ページで、同じカスタム識別子を使用する ECS サーバーとそのハートビートステータスを確認します。

      [ハートビート] のステータスが [OK] の場合、ECS サーバーが Simple Log Service に接続されていることを示します。 ステータスが [FAIL] の場合は、「Logtail マシングループにハートビートがない」をご参照ください。

ステップ 3：ログの収集

1. Alibaba Cloud アカウント A で Simple Log Service コンソール にログインします。

2. [クイック統合] をクリックします。

   

3. [データ統合] ダイアログボックスで、 [Regex - テキストログ] を選択します。

4. [データ統合] ウィザードで、宛先のプロジェクトと Logstore を選択し、[次へ] をクリックします。

5. [マシングループ設定] を構成します。

   1. [シナリオ] を [ホストシナリオ] に設定します。

   2. [インストール環境] を [ECS] に設定します。

   3. ステップ 2 で作成したマシングループを [ソースマシングループ] から [適用先マシングループ] に移動し、次に [次へ] をクリックします。

6. Logtail コレクション構成を作成し、[次へ] をクリックします。

   パラメーターの詳細については、「フル正規表現モードでログを収集する」をご参照ください。

   重要

   • デフォルトでは、1 つのファイルに一致できる Logtail 収集設定は 1 つだけです。アカウント B の収集設定がまだアクティブなため、アカウント A の新しい設定は有効になりません。次のいずれかの方法でアカウント A の設定を有効にできます。

     • アカウント B のログ収集を停止します。これを行うには、アカウント B で Simple Log Service コンソールにログインし、宛先マシングループから Logtail 収集設定を削除します。詳細については、「指定したマシングループに Logtail 設定を適用する」をご参照ください。

     • アカウント A に強制収集設定を追加します。詳細については、「1 つのファイルから複数回ログを収集する方法」をご参照ください。

   • Logtail 収集設定を作成した後、重複したログ収集を防ぐために、Alibaba Cloud アカウント B の元の設定を削除してください。詳細については、「Logtail 設定の削除」をご参照ください。

   

7. データをプレビューし、インデックスを設定してから、[次へ] をクリックします。

   Simple Log Service はデフォルトでフルテキストインデックス機能を有効にします。収集したログに基づいて、手動または自動でフィールドインデックスを設定することもできます。詳細については、「インデックスの作成」をご参照ください。

関連操作