Security Center:Tencent Cloud ログデータのインポート

Kafka プロトコルでの消費を介して CLS からデータを配布するタスクの作成

1. Kafka プロトコルでの消費の有効化

   1. Tencent Cloud - Log Topic ページに移動し、左上隅で適切なログストレージの リージョンを選択します。

   2. ターゲットの [Log Topic] の名前をクリックして、詳細ページに移動します。

      • Web Application Firewall：通常、plain Logset の下にあります。詳細については、「CLS へのログ配布」をご参照ください。

   3. 左側のナビゲーションウィンドウで、[Kafka 経由での消費] をクリックします。[基本情報] タブで、右側の [編集] をクリックし、[現在のステータス] スイッチをオンにします。以下のように設定を構成し、[OK] をクリックします。

      • タイムスタンプ範囲：履歴 + 最新。

      • コンシューマーデータフォーマット：JSON (エスケープを無効にするを選択) または Raw コンテンツ。

      • データ圧縮フォーマット：圧縮なし。

      • パブリックアクセス：有効。

      • サービスログ：有効。

2. Kafka サービスへの接続に必要な情報の取得

   設定完了後、コンシューマーパラメーターを表示して、必要な設定情報 (CLS のパブリックサービスアドレス (エンドポイント)、ユーザー名、コンシューマートピック) を取得します。この情報は、「Security Center に COS へのアクセスを権限付与」および「データインポートタスクの作成」の際に使用するため、メモしておいてください。

   パラメーター	説明
   パブリックエンドポイント	フォーマット：kafkaconsumer-${region}.cls.tencentcs.com:9096。
   topic	Kafka の Topic。
   username	${LogSetID} に設定します。これは Logset ID です。
   password	${SecretId}#${SecretKey} に設定します。

AccessKey ペアの設定

• メインアカウントキーの使用：Tencent Cloud - API キー管理 ページに移動し、[キーの作成] をクリックします。[CSV ファイルのダウンロード] をクリックするか、ローカルファイルにコピーして、生成された SecretId と SecretKey を安全に保存します。詳細については、「メインアカウントのアクセスキーの管理」をご参照ください。

  説明

  API キーまたはプロジェクトキーのいずれかを使用できます。

• サブアカウントキーの使用：

  1. CAM コンソールの Tencent Cloud - ポリシー ページで、キーのセキュリティを確保するために最小限の権限を持つポリシーを作成します。詳細については、「Kafka プロトコルでの消費の権限付与」および「ポリシー構文によるカスタムポリシーの作成」をご参照ください。

     {
         "version": "2.0",
         "statement": [{
             "action": [
                 "cls:PreviewKafkaRecharge",
                 "cls:CreateKafkaRecharge",
                 "cls:ModifyKafkaRecharge"
             ],
             "resource": "*",
             "effect": "allow"
         }]
     }

  2. Tencent Cloud - ユーザーリスト ページに移動し、既存のサブアカウントを選択するか、新しいサブアカウントを作成します。

     • 前のステップで作成したアクセスポリシーをアタッチします。

     • [ユーザー詳細] ページで、[API キー] タブに移動し、[キーの作成] をクリックします。[CSV ファイルのダウンロード] をクリックするか、ローカルファイルにコピーして、生成された SecretId と SecretKey を安全に保存します。詳細については、「サブアカウントのアクセスキーの管理」をご参照ください。

Security Center に Kafka へのアクセスを権限付与

1. Security Center コンソール > システム設定 > 機能設定に移動します。ページ左上で、ご利用のアセットが所在するリージョンを選択します：Chinese MainlandまたはOutside Chinese Mainland。

2. マルチクラウドの設定と管理 タブで、マルチクラウドアセット を選択し、権限の新規付与 をクリックします。表示されるパネルで、以下のパラメーターを設定します：

   • ベンダー： Apache を選択します。

   • 接続タイプ：[Kafka] を選択します。

   • エンドポイント：Tencent Cloud のKafka プロトコルでの消費のパブリックアクセスアドレスを入力します。

   • ユーザー名：Tencent Cloud のKafka プロトコルでの消費のユーザー名を入力します。

   • パスワード：「AccessKey ペアの設定」で取得した連結されたアカウントキー情報 (SecretId#SecretKey)。

   • 通信プロトコル：sasl_plaintext。

   • SASL 認証メカニズム：plain。

3. 同期ポリシーの設定

   AK サービスのステータスチェック：Security Center が Tencent Cloud アカウントの AccessKey ペアの有効性を自動的にチェックする間隔を設定します。[無効] を選択してこのチェックをオフにすることもできます。

データインポートタスクの作成

1. データソースの作成

   Tencent Cloud ログデータ専用の Agentic SOC データソースを作成します。すでに作成済みの場合は、このステップをスキップしてください。

   1. Security Center コンソール > Agentic SOC > 統合センターに移動します。ページ左上で、ご利用のアセットが所在するリージョンを選択します：Chinese MainlandまたはOutside Chinese Mainland。

   2. Data Source タブで、Tencent Cloud からのログを受信するためのデータソースを作成します。具体的な手順については、「データソースの作成：ログが Log Service (SLS) に接続されていないデータソース」をご参照ください。

      • Source Data Source Type：User Log Service または Agentic SOC Dedicated Collection Channel を選択できます。

      • インスタンス接続：データを分離するために、新しい Logstore を作成することを推奨します。

2. Data Import タブで、Add Data をクリックします。表示されるパネルで、以下のパラメーターを設定します：

   • エンドポイント：Tencent Cloud のKafka プロトコルでの消費のパブリックアクセスアドレスを選択します。

   • Topics：Tencent Cloud のKafka プロトコルでの消費のコンシューマートピックを選択します。

   • 値のタイプ：これは、CLS データ配布タスクで設定したコンシューマーデータフォーマットに対応します。

     出荷フォーマット	値のタイプ
     JSON	json
     Raw コンテンツ	text

3. ターゲットデータソースの設定

   • データソース名：ステップ 1 で作成したデータソースを選択します。

   • ターゲット Logstore：システムは選択されたデータソースの下にある Logstore を自動的にフェッチします。

4. [OK] をクリックして設定を保存します。インポート設定が完了すると、Security Center は自動的に Tencent Cloud からログをプルします。

CLS から COS にデータを配布するタスクの作成

1. COS 配信タスクの作成：

   1. Tencent Cloud - Log Topic ページに移動し、左上隅で適切なログストレージの リージョンを選択します。

   2. ターゲットの [Log Topic] の名前をクリックして、詳細ページに移動します。

      • Web Application Firewall：通常、waf_post_logset Logset の下にあります。詳細については、「CLS へのログ配布」をご参照ください。

   3. 左側のナビゲーションウィンドウで、[COS への配布] を選択し、[配布設定の追加] をクリックします。以下のパラメーターを設定します：

      説明

      ログアーカイブの確認ページが表示された場合は、[それでも COS に配布] をクリックして続行します。

      • 基本設定：

        • [時間範囲]：データ分析をサポートするため、終了時刻は設定しないでください。

        • [ファイルサイズ]：ログ配信のトリガー値を設定します。蓄積されたログサイズがこの値に達すると、ログは COS に配信されます。

        • [配布間隔]：ログ配信の時間間隔を設定します。各間隔内に生成されたログは圧縮され、COS に配信されます。

        重要

        ファイルサイズと配布間隔の条件は論理 OR 関係にあります。いずれかの条件が満たされると、ログ配信がトリガーされます。

      • バケット設定：

        • [COS バケット]：WAF や CFW などの Tencent Cloud プロダクトからのログを保存するためのバケットを選択または作成します。

        • [ファイル命名]：データを簡単に区別するために、[配信時間の命名] を選択することを推奨します。

        • ファイル圧縮: [gzip] または [圧縮なし] を選択します。

          警告

          Security Center は、lzop または snappy 圧縮されたログファイルの解析をサポートしていません。

        • [COS ストレージクラス]：[標準] を選択します。詳細については、「ストレージクラスの概要」をご参照ください。

      • 詳細設定：

        • コンシューマーデータフォーマット：[JSON] を選択します。

        • JSON：[エスケープを無効にする] を選択します。

2. COS バケットのアクセスドメイン名 (エンドポイント) の取得。

   Tencent Cloud - バケットリスト ページに移動し、前のステップで設定した [COS バケット] を見つけます。バケット詳細ページに移動し、[ドメイン情報] セクションからドメイン名を取得します。

   重要

   • ドメイン名にバケット名が含まれていないことを確認してください。フォーマットは cos.${region}.myqcloud.com です。

   • この情報は、「Security Center に COS へのアクセスを権限付与」および「データインポートタスクの作成」の際に使用するため、メモしておいてください。

   

AccessKey ペアの設定

• メインアカウントキーの使用：Tencent Cloud - API キー管理 ページに移動し、[キーの作成] をクリックします。[CSV ファイルのダウンロード] をクリックするか、ローカルファイルにコピーして、生成された SecretId と SecretKey を安全に保存します。詳細については、「メインアカウントのアクセスキーの管理」をご参照ください。

  説明

  API キーまたはプロジェクトキーのいずれかを使用できます。

• サブアカウントキーの使用：

  1. CAM コンソールの Tencent Cloud - ポリシー ページで、キーのセキュリティを確保するために最小限の権限を持つポリシーを作成します。詳細については、「COS への配布の権限付与」および「ポリシー構文によるカスタムポリシーの作成」をご参照ください。

     {
         "version": "2.0",
         "statement": [
             {
                 "effect": "allow",
                 "action": [
                     "cls:DescribeTopics",
                     "cls:DescribeLogsets",
                     "cls:DescribeIndex",
                     "cls:CreateShipper"
                 ],
                 "resource": "*"
             },
             {
                 "effect": "allow",
                 "action": [
                     "tag:DescribeResourceTagsByResourceIds",
                     "tag:DescribeTagKeys",
                     "tag:DescribeTagValues", 
                     "cls:ModifyShipper",
                     "cls:DescribeShippers",
                     "cls:DeleteShipper",
                     "cls:DescribeShipperTasks",
                     "cls:RetryShipperTask",
                     "cls:DescribeShipperPreview",
                     "cos:GetService",
                     "cam:ListAttachedRolePolicies",
                     "cam:AttachRolePolicy",
                     "cam:CreateRole",
                     "cam:DescribeRoleList"
                 ],
                 "resource": "*"
             }
         ]
     }

  2. Tencent Cloud - ユーザーリスト ページに移動し、既存のサブアカウントを選択するか、新しいサブアカウントを作成します。

     • 前のステップで作成したアクセスポリシーをアタッチします。

     • [ユーザー詳細] ページで、[API キー] タブに移動し、[キーの作成] をクリックします。[CSV ファイルのダウンロード] をクリックするか、ローカルファイルにコピーして、生成された SecretId と SecretKey を安全に保存します。詳細については、「サブアカウントのアクセスキーの管理」をご参照ください。

Security Center に COS へのアクセスを権限付与

1. Security Center コンソール > システム設定 > 機能設定に移動します。ページ左上で、ご利用のアセットが所在するリージョンを選択します：Chinese MainlandまたはOutside Chinese Mainland。

2. マルチクラウドの設定と管理 タブで、マルチクラウドアセット を選択し、権限の新規付与 をクリックし、ドロップダウンから [IDC] を選択します。表示されるパネルで、以下のパラメーターを設定します：

   • ベンダー：[AWS-S3] を選択します。

   • 接続タイプ：[S3] を選択します。

   • エンドポイント：COS バケットのアクセスドメイン名 (エンドポイント) の取得。

   • Access Key ID/Secret Access Key：「AccessKey ペアの設定」で取得したキー。

3. 同期ポリシーの設定

   AK サービスのステータスチェック：Security Center が Tencent Cloud アカウントの AccessKey ペアの有効性を自動的にチェックする間隔を設定します。[無効] を選択してこのチェックをオフにすることもできます。

データインポートタスクの作成

1. Security Center コンソール > Agentic SOC > 統合センターに移動します。ページ左上で、ご利用のアセットが所在するリージョンを選択します：Chinese MainlandまたはChinese Mainland。

2. Data Import タブで、Add Data をクリックします。表示されるパネルで、以下のパラメーターを設定します：

   • エンドポイント：COS バケットのアクセスドメイン名 (エンドポイント) の取得。

   • バケット：COS バケット

3. ターゲットデータソースの設定

   • データソース名：通常ステータスのカスタムデータソース (Custom Log Capability/Agentic SOC Dedicated Data Collection Channel) を選択します。適切なデータソースが存在しない場合は、「データソースの設定」を参照して新しいデータソースを作成してください。

   • ターゲット Logstore：システムは選択されたデータソースの下にある Logstore を自動的にフェッチします。

4. [OK] をクリックして設定を保存します。インポート設定が完了すると、Security Center は自動的に Tencent Cloud からログをプルします。