HAProxy のログを収集する
このドキュメントでは、Bindplane エージェントを使用して HAProxy ログを Google Security Operations に取り込む方法について説明します。
HAProxy は、HTTP リクエスト、接続イベント、バックエンド ヘルスチェック、プロセス アクティビティの syslog メッセージを生成する高可用性ロードバランサおよびプロキシ サーバーです。パーサーは、Grok パターン マッチングを使用して、さまざまな HAProxy ログ形式からフィールドを抽出し、統合データモデル(UDM)にマッピングします。
始める前に
次の前提条件を満たしていることを確認してください。
- Google SecOps インスタンス
- Windows Server 2016 以降、または
systemdを使用する Linux ホスト - Bindplane エージェントと HAProxy サーバー間のネットワーク接続
- プロキシの背後で実行している場合は、Bindplane エージェントの要件に従ってファイアウォール ポートが開いていることを確認します。
- HAProxy 構成に対する管理者権限
Bindplane エージェントの Google SecOps 認証情報を取得する
Bindplane エージェントを Google SecOps に対して認証するには、次のいずれかの方法を選択します。
- 新規デプロイ: Chronicle API を使用します(オプション 1)。
- 以前のデプロイ: 2027 年 7 月 20 日に Ingestion API が廃止されるまで、取り込み認証ファイル(オプション 2)を引き続き使用します。
オプション 1: Chronicle API のサービス アカウントを作成する(推奨)
- Google Cloud コンソールにログインし、Google SecOps インスタンスにリンクされている Google Cloud プロジェクトを選択します。
- [IAM と管理> サービス アカウント] に移動します。
- [サービス アカウントを作成] をクリックします。
- 次の構成情報を指定します。
- サービス アカウント名: アカウントの名前を入力します(例:
bindplane-ingest)。 - サービス アカウントの説明: 説明を入力します(例:
Bindplane agent log ingestion)。
- サービス アカウント名: アカウントの名前を入力します(例:
- [作成して続行] をクリックします。
- [このサービス アカウントにプロジェクトへのアクセスを許可する] セクションで、[ロールを選択] をクリックし、[Chronicle 編集者] を選択します。
- [続行] をクリックして [完了] をクリックします。
- 作成したサービス アカウントをクリックし、[キー] タブに移動します。
- [鍵を追加] > [新しい鍵を作成] の順にクリックします。
- [JSON] を選択し、[作成] をクリックします。鍵ファイルがパソコンにダウンロードされます。
- 鍵ファイルを
ingestion-auth.jsonとして Bindplane コレクタ ディレクトリ(Linux の場合は/opt/observiq-otel-collector/ingestion-auth.json、Windows の場合はC:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json)に保存するか、config.yamlのcreds_file_pathを更新して、保存先のパスと一致させます。 - [IAM と管理] > [設定] に移動し、[プロジェクト番号] をコピーします。これはエクスポータの構成に必要です。
オプション 2: 取り込み認証ファイルをダウンロードする(以前のバージョン)
- Google SecOps コンソールにログインします。
- [SIEM 設定] > [収集エージェント] に移動します。
- 取り込み認証ファイルをダウンロードします。
- Bindplane エージェントがインストールされるシステムにファイルを安全に保存します。
Google SecOps のお客様 ID を取得する
- Google SecOps コンソールにログインします。
- [SIEM 設定] > [プロファイル] に移動します。
[組織の詳細情報] セクションから [お客様 ID] をコピーして保存します。
Bindplane エージェントをインストールする
次の手順に沿って、Windows または Linux オペレーティング システムに Bindplane エージェントをインストールします。
Windows へのインストール
- 管理者としてコマンド プロンプトまたは PowerShell を開きます。
次のコマンドを実行します。
msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quietインストールが完了するまで待ちます。
次のコマンドを実行して、インストールの内容を確認します。
sc query observiq-otel-collectorサービスが RUNNING と表示されます。
Linux へのインストール
- root 権限または sudo 権限でターミナルを開きます。
次のコマンドを実行します。
sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.shインストールが完了するまで待ちます。
次のコマンドを実行して、インストールの内容を確認します。
sudo systemctl status observiq-otel-collectorサービスが active (running) と表示されます。
その他のインストール リソース
その他のインストール オプションとトラブルシューティングについては、Bindplane エージェントのインストール ガイドをご覧ください。
Syslog を取り込んで Google SecOps に送信するように Bindplane エージェントを構成する
構成ファイルを探す
Linux:
sudo nano /opt/observiq-otel-collector/config.yamlWindows:
notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
構成ファイルを編集します。
config.yamlの内容全体を次の構成に置き換えます。receivers: udplog: listen_address: "0.0.0.0:514" exporters: chronicle/haproxy: protocol: https # Region of your instance, for example us, europe, asia-southeast1 location: <LOCATION> # Project number of the Google Cloud project linked to the instance project: '<PROJECT_NUMBER>' compression: gzip creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json' customer_id: '<customer_id>' endpoint: chronicle.googleapis.com log_type: HAPROXY raw_log_field: body service: pipelines: logs/haproxy_to_chronicle: receivers: - udplog exporters: - chronicle/haproxy
構成パラメータ
各プレースホルダを次のように置き換えます。
レシーバーの構成:
listen_address: リッスンする IP アドレスとポート:0.0.0.0: すべてのインターフェースでリッスンします(推奨)。- ポート
514は標準の syslog ポートです(Linux では root が必要です。root 以外の場合は1514を使用します)。
エクスポータの構成:
creds_file_path: サービス アカウントの JSON キーファイルのフルパス(オプション 1):- Linux:
/opt/observiq-otel-collector/ingestion-auth.json - Windows:
C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
- Linux:
customer_id: Google SecOps コンソールからコピーしたお客様 IDlocation:<LOCATION>は、Google SecOps インスタンスのリージョン(us、europe、asia-southeast1など)に置き換えます。エクスポーターは、chronicle.googleapis.comの先頭にこの値を付加します。完全なリストについては、リージョン エンドポイントをご覧ください。project:<PROJECT_NUMBER>を [IAM と管理] > [設定] のプロジェクト番号に置き換えます。endpoint:chronicle.googleapis.comに設定したままにします。
以前の取り込み API エクスポータ
オプション 2 の取り込み認証ファイルを使用する場合は、
exportersブロックを次のように置き換えます。creds_file_pathを取り込み認証ファイルのパスに設定します。インスタンスが米国以外にある場合は、malachiteingestion-pa.googleapis.comをリージョン エンドポイント(例:europe-malachiteingestion-pa.googleapis.com)に置き換えます。exporters: chronicle/haproxy: compression: gzip creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json' customer_id: '<customer_id>' endpoint: malachiteingestion-pa.googleapis.com log_type: HAPROXY raw_log_field: body
構成ファイルを保存する
- 編集後、ファイルを保存します。
- Linux:
Ctrl+O、Enter、Ctrl+Xの順に押します。 - Windows の場合: [ファイル] > [保存] をクリックします。
- Linux:
Bindplane エージェントを再起動して変更を適用する
Linux で Bindplane エージェントを再起動するには、次のコマンドを実行します。
sudo systemctl restart observiq-otel-collectorサービスが実行されていることを確認します。
sudo systemctl status observiq-otel-collectorログでエラーを確認します。
sudo journalctl -u observiq-otel-collector -f
Windows で Bindplane エージェントを再起動するには、次のいずれかのオプションを選択します。
管理者としてコマンド プロンプトまたは PowerShell を開きます。
net stop observiq-otel-collector && net start observiq-otel-collectorサービス コンソール:
Win+Rキーを押し、「services.msc」と入力して Enter キーを押します。- observIQ OpenTelemetry Collector を見つけます。
- 右クリックして [再起動] を選択します。
サービスが実行されていることを確認します。
sc query observiq-otel-collectorログでエラーを確認します。
type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
HAProxy の syslog を構成する
- CLI を使用して HAProxy にログインします。
UDP 経由で syslog メッセージを転送するには、Configuration の global セクションに log ディレクティブを追加します。
<bindplane-ip>は、実際の Bindplane エージェントの IP アドレスに置き換えます。
global log <bindplane-ip>:514 local0 defaults log global
UDM マッピング テーブル
| ログフィールド | UDM マッピング | ロジック |
|---|---|---|
| accept_date_ms | ||
| actconn | ||
| backend_name | ||
| backend_queue | ||
| beconn | ||
| bytes_read | network.received_bytes | ログの bytes_read フィールドから抽出され、符号なし整数に変換されます。 |
| captured_request_headers | ||
| client_ip | principal.ip | ログの client_ip フィールドから抽出されます。 |
| client_port | principal.port | ログの client_port フィールドから抽出され、整数に変換されます。 |
| command_description | metadata.description | ログの command_description フィールドから抽出されます(利用可能な場合)。それ以外の場合は、ログメッセージに応じて action や status などの他のフィールドから派生します。 |
| datetime | metadata.event_timestamp.seconds | ログの datetime フィールドから抽出されます(利用可能な場合)。それ以外の場合は、ログエントリの timestamp フィールドから派生します。 |
| 説明 | metadata.description | ログの description フィールドから抽出されます(利用可能な場合)。それ以外の場合は、ログ メッセージに応じて command_description や action などの他のフィールドから派生します。 |
| feconn | ||
| frontend_name | ||
| http_request | target.url | ログの http_request フィールドから抽出されます。 |
| http_status_code | network.http.response_code | ログの http_status_code フィールドから抽出され、整数に変換されます。 |
| http_verb | network.http.method | ログの http_verb フィールドから抽出されます。 |
| http_version | metadata.product_version | ログの http_version フィールドから抽出され、HTTP/{version} 形式でフォーマットされます。 |
| イニシエータ | target.application | ログの initiator フィールドから抽出されます。 |
| モジュール | ||
| msg | security_result.summary | ログの msg フィールドから抽出されます。 |
| pid | target.process.pid | ログの pid フィールドから抽出されます。 |
| プロセス | ||
| process_name | target.application | ログの process_name フィールドから抽出されます。 |
| retries | ||
| server_name | target.hostname | ログの server_name フィールドから抽出されます。空の場合、デフォルトで syslog_server の値になります。 |
| 重要度 | security_result.severity | ログの severity フィールドからマッピングされます。WARNING は MEDIUM に、ALERT は CRITICAL に、NOTICE は INFORMATIONAL にマッピングされます。 |
| シェル | ||
| srv_queue | ||
| srvconn | ||
| ステータス | ||
| syslog_server | target.hostname、intermediary.hostname | ログの syslog_server フィールドから抽出されます。ターゲット ホスト名(server_name が空の場合)と中間ホスト名の両方に使用されます。 |
| syslog_timestamp | ||
| syslog_timestamp_1 | ||
| syslog_timestamp_2 | ||
| syslog_timestamp_4 | ||
| target_ip | ||
| time_backend_connect | ||
| time_backend_response | ||
| time_duration | ||
| time_queue | ||
| time_request | ||
| timestamp | metadata.event_timestamp.seconds | ログの timestamp フィールドから抽出され、日時情報が解析されます。イベントのタイムスタンプとして使用されます。 |
| unknown_parameters1 | ||
| unknown_parameters2 | ||
| user_name | target.user.userid | ログの user_name フィールドから抽出されます。 |
| metadata.event_type | デフォルトでは NETWORK_HTTP に設定されています。ログ メッセージと解析されたフィールドに基づいて、PROCESS_UNCATEGORIZED、STATUS_UPDATE、USER_UNCATEGORIZED などの特定のイベントタイプに変更されます。 |
|
| metadata.vendor_name | HAProxy Enterprise に設定します。 |
|
| metadata.product_name | HAProxy に設定します。 |
|
| network.application_protocol | message フィールドに HTTP が含まれている場合、HTTP に設定します。 |
|
| metadata.log_type | HAPROXY に設定します。 |
|
source_ip |
event.idm.read_only_udm.principal.ip |
変更履歴からマッピング |
source_ip |
event.idm.read_only_udm.principal.asset.ip |
変更履歴からマッピング |
source_port |
event.idm.read_only_udm.principal.port |
変更履歴からマッピング |
status_code |
event.idm.read_only_udm.network.http.response_code |
変更履歴からマッピング |
bytes |
event.idm.read_only_udm.network.received_bytes |
変更履歴からマッピング |
inter_ip |
event.idm.read_only_udm.intermediary.ip |
変更履歴からマッピング |
inter_port |
event.idm.read_only_udm.intermediary.port |
変更履歴からマッピング |
destination_ip |
event.idm.read_only_udm.target.ip |
変更履歴からマッピング |
destination_ip |
event.idm.read_only_udm.target.asset.ip |
変更履歴からマッピング |
destination_port |
event.idm.read_only_udm.target.port |
変更履歴からマッピング |
referer |
event.idm.read_only_udm.network.http.referral_url |
変更履歴からマッピング |
user_agent |
event.idm.read_only_udm.network.http.user_agent |
変更履歴からマッピング |
time_stamp |
event.idm.read_only_udm.security_result.detection_fields |
変更履歴からマッピング |
x_forwarded_for |
event.idm.read_only_udm.security_result.detection_fields |
変更履歴からマッピング |
content_length |
event.idm.read_only_udm.security_result.detection_fields |
変更履歴からマッピング |
datetime |
event.idm.read_only_udm.metadata.event_timestamp |
変更履歴からマッピング |
変更ログ
さらにサポートが必要な場合 コミュニティ メンバーや Google SecOps のプロフェッショナルから回答を得ることができます。